▲光学动作捕捉技术在光学动作捕捉设备和方案上 , 国内外都涌现出一些较为优秀的公司代表 , 比如说影视动捕巨头VICON公司以及国内利亚德集团下的北京虚拟动点科技有限公司 。
北京虚拟动点科技有限公司的成立与美国光学巨头公司NaturalPoint离不开关系 。 利亚德集团在2016年11月4日宣布 , 计划通过旗下的子公司平达公司 , 以8.44亿元人民币全资收购了美国光学巨头公司NaturalPoint , 同时也收下了其旗下OptiTrack产品系列 , 随后成立了北京虚拟动点科技有限公司 。
OptiTrack的光学动作捕捉方案可以通过两个以上的高速智能摄像头对于移动目标进行定位 , 并记录相应数据 , 从而“复现”人物的动作和表情 。
据利亚德集团COO、虚拟动点董事长姜毅介绍 , 当两个人戴上VR眼镜进行传球动作 , OptiTrack运动捕捉系统可以及时抓取一人动作 , 并传送到另一个人的VR眼中 , 整个传输过程中 , OptiTrack实现了高精度、低延迟、以及稳定可靠的传输过程 。
而惯性动作捕捉方案 , 主要是通过人物在各个关键佩戴的惯性传感器 , 并且对一些主要的部分进行实时测量 , 是比较主流的动作捕捉方案之一 。
我们常见的动作捕捉服、手套等设备都是属于这类惯性动作捕捉范围内 。
▲《指环王》动作捕捉演员Andy Serkis甚至现在也出现了人们通过惯性动作捕捉技术打造一个虚拟数字人来直播带货 。
▲卡通形象的虚拟数字人直播带货现场在惯性动作捕捉的赛道里 , 国内厂商诺亦腾、国外厂商XSens都拥有比较成熟的产品 。 其中 , 诺亦腾通过全身17节点惯性传感器、全身绑带、传感器充电盒以及EVA便携箱等组成部分打造了入门级无线动作捕捉系统Perception Neuron 3 。
第三种则是以Track设备+IK算法的动作捕捉方案 , 主要通过Track设备以及IK算法相结合 , 模拟出一定的动作姿态 。 这种动作捕捉方案在一些消费级的产品上运用较多 , 也颇受硬核技术流玩家们的喜爱 , 他们可以搭建自己的动作捕捉设备方案 。
此前 , 英国实时动作捕捉技术开发商IKinem也基于这样的模式推出了Orion 2.0产品 , 该产品通过与不同的硬件设备兼容 , 实现跟踪数字化身的全身运动轨迹 , 后来该公司以及其产品线被苹果收购 。
最后一种则是近期大火的以人工智能为核心的动作捕捉方案 , 借助设备上自带的摄像头 , 如iPhone里搭载的深感摄像头实现面部捕捉功能 , 并且通过深度学习 , 训练算法将2D图像转换成3D图像 , 从而让一些坐着的主播可以拥有一个活灵活现的虚拟形象 。
由于这种动作捕捉方案对硬件要求较低 , 多数依靠软件层的算法 , 因此具有较为广泛的应用空间和利润空间 。
▲以人工智能为核心的面部捕捉技术方案“如果对自由度和视角的要求不高的话 , 这类基于计算机视觉关键点识别的动捕方案 , 会是消费者和从业者比较容易接触到的 , 因为不会涉及到新的成本 , 好一点的手机上的摄像头就可以实现基础的身体与面部捕捉” , 国内动捕巨头公司诺亦腾CEO戴若犁说道 。
对于动作捕捉技术未来的发展 , 戴若犁提到 , 之前动作捕捉系统主要是面对科研、影视等专业领域 , 因此 , 在系统复杂度以及成本上基本上不太适用消费级市场 。 “在大家都过了新鲜劲之后 , 如果虚拟人赛道不再适用于消费者市场的话 , 未来的动捕技术还是会为面向专业领域的从业者服务” 。
2、主打Unreal和Unity渲染引擎 , 颜值和交互性成虚拟数字人渲染关键
除此之外 , 当人们通过不同的设备记录下自己的动作方案之后 , 还需要通过渲染引擎 , 对毛发、衣物等细节尽量还原 。 如果单从引擎性能上来说 , 游戏领域的渲染引擎达到最好的渲染效果 。 目前 , 国内虚拟数字人主要通过Unreal、Unity游戏引擎对人物形象进行渲染 。
据陈坚介绍 , 渲染成果主要关注好看和好用两个方面 。 其中 , 好看是指视觉效果上能做到什么样的精细程度 , 而好用功能上 , 首先要考虑多个角色同台时渲染的效果 , 在直播过程中能否及时调整细节 。 “这些才是决定你的虚拟数字人产品化程度的关键” 。
同时 , 据国外媒体报道 , Epic Games推出了云端流式应用MetaHuman Creator , 可以让用户在一小时时间内 , 不但能实现实时动作捕捉 , 还能完成人物的渲染 , 让用户可以轻松上手创建虚拟数字人 。
总而言之 , 目前的虚拟数字人主要依靠光学动作捕捉、惯性动作捕捉、Track设备+IK算法动作捕捉方案和以人工智能为核心的动作捕捉方案为主 。
- 空间站|东方红一号仍在飞行,天宫空间站已值班,能用机械臂带它回家吗?
- 电子商务|腾讯回应财付通被罚:已全部完成整改
- 百度|派财经 · 一周热闻:工信部因电信网络诈骗约谈阿里云、百度云;腾讯回应APP暂停更新
- 空间站|揭秘!空间站宇航员的太空生活 美国都酸了,对中国空间站有意见
- 编程|腾讯,搬起石头砸自己的脚!
- 电子商务|官方点名才重视?腾讯公开回应,马化腾该好好反思了
- 芯片|华为找到解决芯片制造问题的办法,余承东放话2023年王者归来
- bilibili|B站,故事越来越难讲
- 腾讯|腾讯惨了,旗下即将发布的APP被勒令必须先检测后上架,现有可继续用
- 阿里巴巴|互联网公司不敢赚钱?阿里腾讯十年来净利润首亏损,该换挡了?