VRPinea■手势交互+多人协作,Nreal积极布局MR内容生态
(VRPinea2020年3月7日电)2020年初 , Nreal在CES上发布了混合现实(MR)环境下的3D操作系统——星云 。 在近日 , Nreal宣布将加入了手势识别功能 , 并提供多方协同作业的设计软件 , 以此更好的完善内容生态体系 。 同时 , Nreal正同韩国LG U+和德国电信等运营商深入合作 , 进一步拓展在海外MR领域的市场份额 。
星云系统之上再融合30种手势
让你足够自然地操作模型
电子产品的输入方式 , 经过PC电脑时代的键鼠输入 , 到智能手机时代 , 已经被触摸手势所代替 。 而在XR领域中 , 手势识别的输入方式 , 被认为是最自然的输入和交互方式 。 在以往的类似产品中 , VR往往需要加入专门配备的追踪手套 , AR/MR则需要加入专用的手势识别模块和传感器才能实现实时高精度的手势追踪 。
如今 , 随着计算机视觉技术的迭代 , 利用普通摄像头的Slam算法来计算手势操作 , 成为未来一代XR产品手势识别的关键技术 。 Nreal目前在不增加额外硬件模块的基础上 , 与海外手势交互应用公司Clay AIR合作 , 将其手势应用引入到Nreal Light上来 。
本文插图
【VRPinea■手势交互+多人协作,Nreal积极布局MR内容生态】
Clay AIR在2018年曾经与高通合作 , 为旗下OEM产品提供关键交互技术 。 这也是目前XR头显领域中 , 为数不多的提供标准化手势识别的公司 。 据了解 , 通过Clay的软件算法 , 已经可以识别包括拿、捏、抓、轻扫等超过30种用户的手势动作 , 从而操纵虚拟物体 , 与MR环境进行更加直观的交互 。
Nreal Light通过前部摄像头将手部动作分为多个追踪节点 , 并将手部模型叠加在这些追踪节点之上 , 通过高通骁龙855及以上芯片实现高速的图形渲染 , 从而实现用户的手势操作 。 同时 , 在此前Nreal Light已经实现用智能手机作为控制器 , 或者专门的6Dof控制器进行MR环境的交互操作 。 Nreal认为 , 提供不同的交互方式让开发者和用户进行选择 , 才是一个更成熟的硬件开发企业的职责 。
据了解 , 手势识别功能将在近期通过Nreal SDK提供给开发者 , 并可以将该功能应用在支持Nreal 3D系统星云的安卓应用程序中 。 通过Nreal SDK , 开发人员可以进行手势追踪的自定义 , 包括重塑或渲染全手、单独的手指、边界框、光标或自定义外观 , 前期完全支持的手势包括捏、指向、抓取、滑动和缩放 。
Nreal此前宣布在全球范围拥有超过3500个内容开发者 , 并与全球多家通信运营商达成合作 , 包括了日本KDDI、韩国LG U+、德国电信Deutsche Telekom、瑞士电信Swisscom、英国EE等 。 在韩国 , Nreal通过在LG U+的零售店展示 , 在韩国进行Nreal Light设备的举措将MR带入了韩国消费者的生活 。
Nreal在2019年推出消费者版本的Nreal Light后 , 积极布局开发者生态和海外销售体系 。 作为国内为数不多在国际市场有所影响力的MR厂商 , Nreal正逐步完善内容体系和挖掘MR在各领域的潜力 。
本文插图
在此前的消息中 , Nreal和国内尖端的眼动追踪品牌七鑫易维已达成合作 , 将于今年推出带有眼动追踪模块的MR眼镜 , 眼动追踪和手势识别两大输入方式的叠加 , 或许会让Nreal一步步接近MR的终极形态 。
重构多人协作
带上眼镜随时操作3D模型
MR眼镜除了娱乐领域 , 工业、设计领域的应用日益凸显 。 精密机械、高精动画模型、建筑模型通过MR环境进行设计、定型、维修 , 已经在部分世界知名企业应用到生产领域 。 然而 , 绝大多数MR环境中的3D模型 , 需要工程师不但具备建模能力 , 还需要针对MR眼镜进行软件技术环境的开发 。 这也是MR+工业领域的一大痛点 。 同时 , 多数MR设计软件不具备多台硬件的协同工作 , 这也导致了MR在工业领域的应用场景虽然广阔 , 但真正落地有着高成本、高难度、低频次的特点 。
- [车萝卜]透明屏幕,全语音交互,小米车载新品,米粉:难以置信
- 『青亭网』原创 苹果AR/VR专利:通过桌面触控完成头显交互操作
- []解析“微快递”小程序的交互流程
- 联发科AI技术助力亚马逊突破智能音箱难题:交互更方便
- [快科技]MIUI 12来了?首批截图曝光:相机/手势/通知/广告等大量改进
- 『VRPinea』《爱莉克斯》助Index创下历史最大增幅
- 【科技攻略】全语音交互,小米车载新品,米粉:难以置信,透明屏幕
- 收音机评论译介TB:但在这个机器上失手了,德生收音机的人机交互一直不错
- #收音机评论译介TB#德生收音机的人机交互一直不错,但在这个机器上失手了
- 「青亭网TB」苹果新专利:基于结构光投影的隔空手势方案