近年来,3D人脸识别作为计算机图像分析领域最有前景的应用之一,已经从传统的PC端、客户端延伸至移动端,其应用也从生活应用拓展至区域安全等领域。目前包括旷视科技、依图科技、世纪晟科技等公司均在这块领域有不小的建树,而大众用户对3D人脸识别未来的发展动态,特别是在智能设备上的应用更是格外关注。
谈到3D人脸识别技术,固然少不了大量的图形运算,由于AI识别具备精准、深度和广度,这几年在智能手机中已经成为“标配”功能,而AI也让这一特性从单纯的识别发展到智能视觉特性技术,例如我们发现最新发布的联发科Helio P90芯片在AI方面就已经突破了传统的AI特性,人脸识别已经可以升级到实时3D人体姿态识别,全新的APU 2.0创新的将消费端功能体验进行了升级。
3D实时人体姿态识别再升级 可实现追踪与实时美体
实际上联发科在AI方面的建树严格来讲已经有三代产品的铺垫和积累,从最早专注在AI的Helio P60芯片开始,就已经开始了AI的市场化应用,纷纷推出了人脸识别、AI识图、AI相册分类等功能,而最新的Helio P90更是基于AI推出了3D实时人体姿态识别与追踪、AI美颜美体, AI降噪抓拍, AI焦点直播视频虚化等功能,精准锁定了消费者的喜好和需求并进行了功能体验的升级。主要原因还是联发科早期在AI专核方面的积累与提升。
关注联发科的网友应该了解,实时人体姿态识别这一特性实际上在联发科P70上就已经搭载,但联发科P90则在此基础上进一步将AI算力提升,带来的是3D的实时人体姿态识别,而且进一步可实现3D人体姿态追踪的特性,例如在其发布会期间,基于3D姿态识别,展出Helio P90的3D人体姿态识别,机器人实时追踪人体动作这一Demo,另一个虚拟角色化身,也是基于实时3D人体姿态识别基础之上,而这一创新举动有望给手机厂商带来新的玩法以及新的功能卖点。
联发科P90的3D实时人体姿态识别与追踪可以让机器人追踪人体动作。(图/网络)
以目前的人体姿态识别为例,当下的姿势识别解决方案,大多是着眼于一组关节或人体上的几个关键点,例如手腕、肘部、四肢等等,但这样的观察方式,无法满足观察对象在不同姿态上表现的积极动作动作,因此很难去深刻理解图像。对于成熟的商业应用来说,人体姿态识别需要的是人体表面的全方位观察,例如把每个人变成UV贴图,可以精准到一片一片,而这就不仅对覆盖点提出了更高要求,而且对覆盖对象也要求能多元化。
目前联发科P90则在P70的基础上更进一步,不仅完善了人体姿态识别算法,还能实时输出三维坐标,通过这样的协作,联发科P90不仅完善了对人体姿态的观察,还实现了初具规模的3D检测,并进一步完成“人体数据输出”。也就是说,基于你的人体姿态数据,能复刻出一个具备完全动作属性的对象。例如目前联发科P90就可以通过人体姿态来同步控制机器人上下左右的运动,实现了真正的 3D Pose,而这也是目前业界少有的移动解决方案。
当然更重要的是,基于这样的解决方案,未来手机厂商可以通过“人体数据输出”这样的特性来实现趣味性操作,例如同步机主和电子机器人、在游戏中进行混合现实、虚拟现实的操作等等。
3D人体姿态识别创新型应用,AI美体成差异优势
有了对3D人体姿态的成功捕捉,更重要的是如何将这一技术在移动端实现创新性应用。而联发科这次锁定的方向是 “视频”,推出了基于影片层面的美颜美体功能,成功将AI带入新的领域。
对于3D属性的视频领域来说,美颜美体如同2D图形的美颜自拍,虽然目前也已经有美颜美体的初步解决方案,但大多需要用户在一个比较简单的背景下,最大限度的展现出身体姿态,进而进行定位美化,但这样不仅效果失真且容易带来卡顿的感觉。又或者是将已经排好的视频进行输出,通过定位人体的关键点来实现二次的美化,本质上可以看成是多个2D图形美化后的效果叠加,无法实现真正的实时美颜美体功能。
而联发科P90则是基于精准的3D人体姿态识别算法,在通过对人体比例、特征等标准进行解读后,结合人体精准关键点、人体轮廓、人体分割等业界领先的 AI算法为基础,打造出可针对人体各个部位进行修正和美化的智能美体算法,甚至还能针对性别、肤色、年龄等细节做进一步的优化,可在视频直播、在线互动等场景中实现瘦身、隆胸、长腿、提臀、收腰、增高、瘦腿等一系列强大的塑形功能,甚至能自动实现黄金比例身材调节,对于消费者而言,这是目前手机市场前所未有的新功能,实时美体将为手机厂商增加新的卖点。
而得益于联发科AI美体的功能,未来可帮助手机厂商锁定直播行业,面对更精准的直播人群,在“抖音”或者是“虎牙”中显得更为妙曼动人和清新可爱。
至于联发科P90有如此强大的表现实际上和它的AI性能不无关系,根据数据显示联发科P90的AI速度甚至要快过Apple A12和高通骁龙855芯片,例如此前在ETH Zurich苏黎世联邦理工学院开发的AI跑分测试中,联发科P90就以25645的得分超越了高通骁龙855的22083分,此前未见联发科执着在跑分方面,却意外看到AI跑分大幅领先,不得不说AI时代,不能再只用CPU和GPU的跑分来谈论性能,AI专核已经彻底颠覆智能手机的游戏规则。
图为联发科P90在AI方面的得分,已经位居行业前列。(图/网络)
目前有消息透露首批搭载Helio P90平台的智能手机预计将于2019年第一季度上市,届时手机市场将首次迎来超越旗舰机型AI体验的设备登场,考虑到如今AI在智能设备中已经发觉着无可替代的重要性,不得不佩服联发科已经未雨绸缪,正在推动AI智能化提升用戶体验的全面普及。
|