美图秀秀大脑分析（大脑研究的最新成果）原创有三AI2019-06-26 21:54:45作者 | 小满 编辑 | 言有三 你爱自拍么？ 距离2018年结束还有一个多月的时间。 19日晚小米集团带来了重磅消息，官宣与美图集团联姻，未来合作期间美图公司将旗下手机业务的品牌、影像技术和域名独家授权给小米，期待这次联姻会擦出不一样的火花。 今天我们来茶话一下影像类app no.1 -- 美图旗下MTlab的＂美图＂。 1 简介 2008年10月，美图公司成立 以＂让更多人变美＂为使命，怀揣着＂成为全球懂美的科技公司＂的愿景，美图公司先后创造了一系列软硬件产品。 美图一枝独秀，打开了无美颜不图片的时代，也使自拍文化深入人心。 2018上半年，美图月活用户总数高达4.547亿，在影像类App市场保持首位。海量的用户数量及在线活跃程度，成为了公司未来发展最为宝贵的资源。 2010年，美图影像实验室（MTlab）成立 美图影像实验室MTlab (Meitu Imaging&Vision Lab)，可谓是美图所有的黑科技来源。 作为美图的核心发动机团队，一直致力于计算机视觉CV、深度学习DL、计算机图形学CG等人工智能AI相关领域, 以技术创新推动公司业务发展。 美图实验室目前分布在北京、厦门、深圳。 美图总部厦门实验室：主要提供人脸技术、美颜技术、3D技术和性能优化； 北京实验室：偏向计算机视觉，包括视频技术及深度学习； 深圳实验室：负责智能硬件相关的影像算法。 2016年12月15日，美图公司香港上市 在香港联合交易所主板挂牌交易，发售价每股8.5港元。随后3个月，股价一路走高翻倍，达到2017年3月最高位的23.05港元，市值逼近千亿。 在上市前，美图共计获得7轮投资，包括14个机构和个人，在业界也颇有名气。 2 领导团队 吴欣鸿，创始人兼首席执行官 2008年10月，吴欣鸿在厦门创办了美图公司，围绕着影像美化，陆续发布了美图秀秀、 美颜相机、美拍、美图拍照手机等一系列软硬件产品，让颜值文化深入人心。 张伟, 首席技术官 美图从一家工具型公司，往人工智能公司转型，不仅仅是出于产品需求，更是攸关性命的一项抉择。在他看来，人工智能这项技术，可以把美图已有的东西重新刷一遍，将技术水平提升到一个前所未有的高度。 程昱，首席运营官 负责商业化策略，并向集团首席执行官汇报。程昱此前任微博公司副总裁，并于微软公司、奇虎360等担任多个管理、产品开发和工程项目的职位。3 研究成果 MTlab作为美图公司的的大脑。 到底在做什么呢？ MTlab将技术分为12类：分为基础技术、综合技术 3.1 基础技术 -人脸技术 MTface 人脸检测，人脸关键点，人脸属性分析（性别，年龄等）。在各类复杂情况下进行实时、稳定、准确分析。 -图像分割MTsegment 基于AI技术，通过分析轮廓、遮挡关系、颜色、纹理、形状等把图像划分成若干互不交迭的区域。 根据实际应用场景，对人体、皮肤、头发、五官等区域进行精确分割。 -3D技术MT3DTech MT3D包括三维重建技术和深度估计技术等。 三维人脸重建算法通过分析图像视频中人脸脸型、表情、五官特征等重建出人脸三维信息，精细度高且实时性强； 基于双摄的深度估计技术，能精确重建拍摄场景的深度信息，用来模拟大光圈相机的景深虚化效果。 -图像恢复 MTrestore 可准确判断画质问题并针对不同成因（如暗光拍摄）对图像或视频进行自动去噪、去模糊、超分辨率，去压缩失真等处理，一键提升画质。 -肢体检测MTpose 基于海量数据及深度学习算法，精准实时识别人体的骨骼关键点位置，如肩，肘，腕，髋，膝，踝关节等。 得益于关键训练样例挖掘和专门为肢体检测定制的卷积神经网络结构，我们的肢体检测系统对于复杂背景，光照变化，大面积遮挡，衣着变化，夸张姿态等有极强的鲁棒性。 -画质增强MTenhance 从美学角度对图像或视频进行自动裁剪，对比度饱和度调整，纹理细节增强，过曝欠曝修正，景深虚化等。 不论是白天还是夜景，手机照片也可以呈现出单反后期大片的效果。 3.2 综合技术 -极智美颜MTBeauty 一套会思考的美颜算法，通过对人脸进行分析，能够根据不同年龄、性别进行个性化、定制级的智能美颜处理。 同时通过机器学习，不断优化美颜效果。作为MTlab核心技术之一，已被广泛应用到美图公司旗下产品中。 -影像生成MTgenerate 基于MTlab自主研发搭建的生成网络DrawNet，通过深度学习技术对大量图像数据进行分析与学习，针对不同需求的图像处理的任务，构建出不同应用场景的图像生成模型，经过模型处理，当用户输入自己的图片便可直接生成出对应效果的输出图。目前该技术已应用于AI人像美化、绘画机器人、亚裔变混血等方面。 -增强现实MTAR 通过结合美图自有的AI技术对项目输出统一跨平台的渲染SDK。负责包括萌拍、虚拟试妆、动态滤镜(实时字幕与效果剪辑)、ARKit&ARCore技术应用等业务。 -美妆技术MTMakeup 通过美图独有人脸网格技术实现实时的视频和图像上妆。应用人脸点、语义分割、3D重建与图像融合等算法，对图像和视频中的人像进行精细编辑，包括上妆和换脸等。 另外，通过自动对五官、轮廓、肤色等维度的分析，可为每个用户智能推荐专属的个人形象（如妆容，配饰，发型等）。 -测肤MTskinAI 基于MTlab自研业界领先的人脸技术及海量医疗级图像数据开发的深度学习皮肤检测方案，能够通过图像来检测和评估个人皮肤状态，如肤质、肤龄、肤色、毛孔、黑眼圈、痘、斑、痣等等。 -AI推理框架MTNN MTNN (美图AI推理框架) 可以让深度学习开发人员便捷高效地编写和运行AI应用程序。 MTNN针对移动端进行了深度优化，支持模型压缩、模型加密、层融合、CPU/GPU/HVX异构计算等关键功能。4 产品介绍 4.1 软件产品 美图拥有六款核心应用，包括核心影像应用美图秀秀、美颜相机、BeautyPlus（美颜相机海外版）、潮自拍及美妆相机以及视频与直播社区应用美拍。 · 美图秀秀 美图秀秀是目前中国最受欢迎的图片处理应用，让普通用户也能拍出媲美专业相机效果的照片。现覆盖了Windows、iOS、Android、Windows Phone等主流平台。 · 美颜相机 一款专为女性用户设计的自拍美颜应用，拥有＂一秒自动美颜＂的强大功能，把普通手机变成超级自拍神器，美颜相机还提供高级美颜、视频自拍等功能，带来全方位的美颜体验。 · 美拍 超好玩短视频社区，在2014年5月上线后，因全球首创的一键式MV特效在短时间内聚集了大量用户，连续24天蝉联App Store免费总榜冠军，并成为当月App Store全球非游戏类下载量第一。 ·潮自拍 国内首个主打电影质感拍摄风格的app，用全新的自拍理念、前所未有的电影质感，线首日夺下当日AppStore免费榜单第一位置。 4.2 硬件产品 美图手机，你身边的智能摄影师。 作为美颜自拍界的鼻祖，将图片社交推进到一个低门槛、人人可参与的爆发时代。美图手机作为集美貌与AI技术于一身的落地产品，一直深受网红、年轻女性的追捧。 最重要的是美图手机黑科技的不断进化，始终站在更高的角度刷用户的自拍体验。美图T9手机早在上市之前，就在京东618新品手机霸榜单品前三。 5 总结 你爱自拍么？ 你爱这家未来将成为全世界最懂美的公司么？ 美图公司现有1500+员工，65%以上都是技术和研发工程师，研发有关CV的所有技术，MTLAB将AI技术渗透在生活的诸多方面，带领我们在图片、小视频的海洋中遇见美的变化，感受AI的力量。 美图，一家让世界变美的公司。