▲英伟达CEO黄世勋的虚拟形象Toy-Me正在与人交流真人驱动型虚拟数字人是以真人为核心 , 用户可以通过3D建模、动作捕捉技术、渲染等技术 , 在网络上形成一个自己的虚拟化身 。 比如说 , B站里的部分虚拟主播们通过动作捕捉平台 , 建立自己的虚拟形象 , 并以虚拟形象的方式与其他用户互动或者表演 。
▲B站虚拟主播超次元次元酱表演秀在创幻科技CEO陈坚看来 , 只有能完成实时互动的才能称的上是虚拟数字人 。 “现在一些虚拟数字人的概念还是通过视频和照片为主 , 这种不能算作真正的虚拟数字人 。 ”
他同时还说道 , 只要具有实时互动功能的数字人都有价值空间 , 也会成为元宇宙的重要组成部分 。 从短期来看 , 智能驱动型虚拟数字人 , 像虚拟客服、虚拟主持人、虚拟导游都在企业市场拥有广泛的应用空间 , 但是从长远的爆发力来说 , 以真人驱动的虚拟数字人才是元宇宙的核心入口 。
他举了个例子 , 日本Virtual Market用了三年的时间举办了六届虚拟漫展 , 参与人数远高于国内的China Joy动漫展 。 “未来每个人都会在3D互联网中拥有自己的虚拟身份 , 当大家可以开始虚拟逛街、虚拟逛展时 , 就会拥有(比智能驱动型数字人)更大的应用空间” 。
▲日本虚拟漫展Virtual Market6展会现场讲完了虚拟数字人的基本概念 , 我们来看看虚拟数字人究竟是什么样子?
在虚拟数字人刚起步的阶段 , 由于渲染技术、网速等原因常常会出现虚拟数字人突然“死机” , 又或者呈现表情生硬、肢体不协调等情况 , 导致虚拟数字人往往都走在各类“翻车”的路上 。
比如说 , 在天气预报的直播现场虚拟主持人突然360度来了个失败的“托马斯全旋” 。
又或者是这样 , 在虚拟偶像综艺现场 , 由于计算能力和渲染能力的不足 , 几个虚拟偶像突然开始表演“千手观音” , 场面一度很鬼畜 。
▲国内虚拟偶像综艺直播现场从这些事故画面中能看到 , 尽管虚拟数字人已经在不同领域拥有了自己的应用场景 , 但是在技术上还仍未成熟 。
后来 , 随着研发人员不断尝试新的技术 , 尤其是在动作捕捉技术上的突破 , 现在的虚拟数字人可以借助VR设备 , 与用户实时互动交流 , 不但能唱歌聊天 , 还能跳舞 , 在互动上呈现了多样的方式 。
▲虚拟偶像远程互动比如说 , 用户可以通过佩戴VR设备(左上角) , 直接与虚拟偶像泠鸢yousa实时互动 。 而上面这个二次元人物的背后 , 正是虚拟泠鸢yousa佩戴者相应的动捕设备 , 做出相应的举动 。
我们可以看到 , 虚拟数字人目前可以简单分为以真人驱动和以数字驱动的两种形式 。 其中 , 以真人驱动的虚拟数字人逐步克服了此前的肢体语言单一 , 面部表情单一等特点 , 开始拥有更加活灵活现的数字形象 。
据目前落地的结果来看 , 打造一个虚拟数字人 , 不仅在创建准备环节有所难度 , 而且如何在多个虚拟人演出的时候实现实时渲染、以及及时调整人物渲染的细节等方面同样面临着一定的挑战 。
二、打破两大技术壁垒 , 虚拟数字人如何更像“人”?倒退十年 , 你如果想给自己打造一个虚拟形象 , 可能需要花费数十万元去买专门的设备 , 聘请专门的拍摄团队才能拥有一个活灵活现的虚拟形象 , 但现在你可能通过一台电脑就能为自己打造一个简易的虚拟化身 。
B站CEO陈睿在哔哩哔哩周年演讲时提到 , 在过去的一年里共有超过32000名虚拟主播在B站开播 , 同比增长40% , 虚拟主播已经成为B站直播领域增长最快的品类 。
这一切都要归功于研发人员在制造虚拟数字人的两大重要环节——动作捕捉技术和渲染技术上做出的突破 。
▲B站虚拟主播分区1、解构四大动作捕捉方案 , 最高可实现毫米级误差
如何让虚拟数字人更加生动?动作捕捉方案是其中的关键要点 。 动作捕捉是指通过数字手段记录现实人们的运动过程 。 过去的一些科幻电影和游戏中 , 人们常常通过基于摄像机的动作捕捉系统完成对于一些科幻角色的塑造 。 同时 , 动作捕捉系统根据实现原理的不同 , 可以分成光学动作捕捉、惯性动作捕捉、Track设备+IK算法的动作捕捉、以人工智能为主的动作捕捉方案 。
光学动作捕捉方案是当动捕演员在特定的部位粘上特殊材料 , 摄像机通过反光来捕捉这些特殊材料的位置变化 , 从而完成对演员的动作捕捉 。
目前 , 光学动作捕捉方案能通过高帧率的捕捉 , 实现毫米级误差精度 , 能对人物动作还原最为精细 , 但这类捕捉方案对于背景环境的要求较高 , 技术门槛也同样较高 。
- 空间站|东方红一号仍在飞行,天宫空间站已值班,能用机械臂带它回家吗?
- 电子商务|腾讯回应财付通被罚:已全部完成整改
- 百度|派财经 · 一周热闻:工信部因电信网络诈骗约谈阿里云、百度云;腾讯回应APP暂停更新
- 空间站|揭秘!空间站宇航员的太空生活 美国都酸了,对中国空间站有意见
- 编程|腾讯,搬起石头砸自己的脚!
- 电子商务|官方点名才重视?腾讯公开回应,马化腾该好好反思了
- 芯片|华为找到解决芯片制造问题的办法,余承东放话2023年王者归来
- bilibili|B站,故事越来越难讲
- 腾讯|腾讯惨了,旗下即将发布的APP被勒令必须先检测后上架,现有可继续用
- 阿里巴巴|互联网公司不敢赚钱?阿里腾讯十年来净利润首亏损,该换挡了?