虚拟数字人,是存在于数字世界的“人”,通过动作捕捉、三维建模、语音合成等技术高度还原真实人类,再借助显示终端呈现出来的立体“人”。在人工智能、虚拟现实等新技术浪潮的带动下,虚拟数字人制作过程得到有效简化、各方面性能获得飞跃式提升,开始从外观的数字化逐渐深入到行为的交互化、思想的智能化。
目前,OPPO发布这一项最新AI技术在业内算是首次,这一项技术可以实现自动为宽松着装人体创建动态数字孪生体的工作,通过手机摄像头拍摄的RGB视频即可创建用户的“三维化身”并捕捉到相对应的一系列动态细节。OPPO在业界首次实现了自动为宽松着装人体创建动态数字孪生体的工作。AI算法仅通过分析手机摄像头拍摄的RGB视频,即可自动创建用户的“三维化身”,还原动态细节。
目前,在不穿戴全套动作捕捉设备的情况下,要实现3D捕捉,还要低成本、高效率、高质量的驱动虚拟世界的人物行为,是一件非常复杂且精细的事情。那么OPPO是则么实现这一切的呢?比如我们想将自己变为虚拟形象,然后完成一套专业的舞蹈动作。首先,找到专业舞者,通过对他的动态捕捉,预先锚定其舞动时的骨骼状态为节点,从而构建一组结构化的局部辐射场。局部辐射场可以模拟其相应节点周围局部空间内的形状和外观,并根据身体姿态和服装样式的动态细节进行变化。者的舞蹈姿势经过编码和渲染,结合你实现采集的形象,仅需几小时,一个有着专业舞蹈水准的你的“数字分身”最终生成。
这项技术被OPPO命名为“数字分身”技术。OPPO的这一项AI技术还可以通过残差运动(residual movements)更好体现出舞蹈时衣裙摆动的细微变化,这一套技术模型也可以应对一系列的舞蹈动作,并且可以不断学习,支持更多的应用场景。这项”数字分身“技术将在在娱乐、时尚、通信等领域开启前所未有的体验,激发创造活力。
而这项技术只是OPPO众多AI黑科技中的一项,都是基于OPPO在视频和图像领域有着行业领先的地位,这些都与OPPO AI算法有着密不可分的关系,另外一个类似应用就是OPPO的”AI焕采美妆视频技术“,人脸检测算法已能够识别635个人脸特征关键点,并实现30次/秒的高速运行。为用户轻松打造了动态的自然美妆效果。这项技术将推动人像视频技术“升维”进化,
对于人工智能,OPPO在业内一直处于第一集团,并积累了大量的理论接触和实践数据,尤其在人机交互上有比较突出的优势。相关数据显示,OPPO在AI领域的全球专利申请超过2700件,主要布局在计算机视觉、语音技术、自然语言处理、机器学习等方面。而随着AI技术的不断发展,人机交互已从最原始的物理方式转向生物交互,以此来满足日益增长的用户需求。