自主研发无穿戴AI视频动捕技术,「云舶科技」要减少虚拟偶像的制作成本

「云舶科技」是以全栈式无穿戴AI视频动捕技术为核心的泛娱乐内容服务商 。 拥有小K娱乐平台(小K直播姬)、小K开放平台和小K动画制作平台(小K网)三大业务线 。
云舶科技自主研发的基于普通摄像头的无穿戴AI视频动捕技术可以通过AI算法对视频里的人物进行姿态捕捉 , 获得人体运动数据 。 用户无需穿戴硬件设备即可实时得到视频内人物的三维动作信息 , 包括肢体 , 手指 , 面部表情等全栈式三维数据 。 这一动捕技术为云舶科技首创 , 已获得专利 。
传统的动捕技术有两类 , 一类是惯性动捕 , 一类是更早出现的光学动捕 。 惯性动捕需要通过用户穿戴惯性传感器设备捕捉身体运动数据 , 经过数据处理后建立3D 数据 。 光学动捕需要在专门的摄影棚进行 , 用户也需要穿戴传感器设备 , 由多个高速相机从不同角度对传感器进行监视和跟踪 , 生成身体动作数据 。 目前 , 这两类动捕技术被用于电影、动画创作中 , 设备成本在几十万到几百万元不等 。 而云舶科技的视频动捕技术无需硬件动捕设备 , 通过AI算法就能实时捕捉视频内人体关键的骨骼点 。
视频动捕技术产生的三大业务线云舶科技于17年开始研发视频动捕技术 , 初衷是为了减少动画师逐帧手动设计动作的工作量 , 让动画师通过上传一段动作视频得到动作数据 , 绑定人物模型即可生成3D动画 。 这一技术于19年底在云舶科技的“小K网”开放 , 目前已有约一万名动画师成为平台用户 。 用户可上传30s以内的动作视频 , 等待约5分钟左右就可以预览和下载bip、fbx格式的动作数据 , 目前内测阶段为动画师免费开放 。 云舶科技通过QQ群等平台获得用户的反馈意见 , 不断迭代技术效果 。
自主研发无穿戴AI视频动捕技术,「云舶科技」要减少虚拟偶像的制作成本文章插图
“小K网”截图
同时云舶科技还将视频动捕技术用于用户UGC创造 , 让C端用户生产自创内容 。 用户可以上传动作视频 , 让3D虚拟形象进行动作表演 。 目前 , 云舶科技已和腾讯、完美、4399、华清飞扬等公司的游戏产品进行项目合作 , 覆盖了MMO、卡牌、AR、沙盒等游戏类型 , 打造游戏玩家UGC动作生成功能 。 玩家通过上传视频就能为游戏角色生成自创动作 , 并且可以分享动作 。 这是云舶科技已经开始批量商业化的业务线 。
公司另一条商业化路线是内容变现 。 云舶科技在今年创立了“小K娱乐平台” , 致力于利用视频动捕技术批量打造虚拟主播 , 提供娱乐内容服务 。 率先推出的虚拟直播产品“小K直播姬”将在近期开始在直播平台内测 。 小K直播姬降低了3D虚拟主播的应用门槛 , 只需普通摄像头就能进行直播表演 。 另外 , 云舶科技注重虚拟直播中的游戏化交互内容 。 云舶科技CEO梅嵩认为 , 交互性内容玩法是虚拟直播相比真人直播的优势 , 也是提升用户的消费意愿的方式 。
自主研发无穿戴AI视频动捕技术,「云舶科技」要减少虚拟偶像的制作成本文章插图
小K直播姬动作演示
未来 , 云舶科技将利用视频动捕技术大批量打造虚拟主播和偶像 , 组建“小K社” , 在直播平台进行内容输出 。 公司将根据观众的喜好度选择重点打造的IP , 除了秀场直播外 , 还可以通过制作周边衍生品、电商带货等途径变现 。
解决虚拟偶像生产的成本难题虚拟偶像由于外形精美、人设稳定 , 互动性高 , 受众不断扩大 。 原先仅限于二次元核心圈的虚拟偶像正在往更宽阔的圈层扩张 。 腾讯、字节跳动、爱奇艺等公司也纷纷入场 。
然而 , 虚拟偶像的成本一直居高不下 。 用传统方式制作一个角色需要投入大量CG制作、动捕、渲染、后期的成本 。 据了解 , 3D角色录制一首歌的成本高达100万元 , 举办一场12首歌的演唱会需要2000万元左右的成本 , 远高于真人偶像 。 因此 , 虚拟偶像行业盈利周期很长 。 并且由于技术要求高 , 新内容的制作周期也较长 , 而粉丝的注意力集中时间很短暂 , 所以虚拟偶像行业也面临粉丝流失快的问题 。
云舶科技想用视频动捕技术解决打造虚拟偶像的成本问题 , 并采用日常化的直播形态增加偶像活动频率 , 让观众保持持续的新鲜感和交互感 , 增加粉丝粘性 。 公司目前在技术、成本和渠道上都有优势:视频动捕技术已获得专利 , 可成熟使用;未来生产一个虚拟人物的成本将只包括美术资产成本和内容创作成本;公司现已和主流直播平台达成合作 。
【自主研发无穿戴AI视频动捕技术,「云舶科技」要减少虚拟偶像的制作成本】