『蛋蛋懂车』座舱还能怎么玩？多模态交互的现在与未来【编者按】国内外汽车人机交互已进入语

文章图片
【编者按】国内外汽车人机交互已进入语音、手势、人脸等多模态交互阶段，下一步的重点将是功能深化、场景应用融合。
本文转自高工智能汽车，原作者高工智能汽车；由亿欧汽车整理转载，供行业内人士参考。
在2019年和2020年的CES展会上，智能驾舱、车载人机交互系统、沉浸式体验就已经成为汽车行业的关注焦点。
在车市不振的当前，主机厂可以通过提供类似易被察觉和用户感受到的差异化功能，迅速提高自身的产品竞争力。尤其是在大屏、多屏等硬件差异化越来越小的背景下，软实力越来越重要。
在2020-2023年各大国内外汽车主机厂的产品规划中，可以清晰看到智能驾舱多模态交互已成为重点规划产品。其中，多模态人机交互主要分为交互信息输入、融合和处理、反馈3个模块。
其中，信息输入模块主要接收来自人的语音、触摸、手势、视觉、表情等信息，然后借助多模态信息融合和理解模块，形成“感”觉和认知，并根据专家知识库系统和检索技术形成对用户的信息反馈，构建出多模态自然人机交互系统。
举例：比如语音输入“我想看看路左边广场的背面大厦的照片” ，需要一个描述准确的完整语句才能完成；而如果采用多模态的交互方式，只需要用眼动追踪再叠加语音即可更加准确地实现上述交互目的。
由此可见，视觉交互的方式有更好的指向性。如人们口头上经常说的“那、这”等代词会在语义上产生多义与歧义，因此可以使用视线感知来避免此类问题。
而目前与视线相关的驾驶员监控系统DMS已从法规层面成为刚需：Euro-NCAP要求2020年DMS成为五星评级的必要条件之一，中国目前也在跟进相关标准法规的制定。
从应用层面， DMS可感知驾舱内驾驶员与乘员的状态，如疲劳、注意力、驾驶行为（抽烟、电话等），充分保障驾驶员行车安全，将是多模态交互的主要方式之一。
相应厂商的量产进度也在加快，比如，未动科技在智能驾舱视觉AI领域的产品已实现规模销售， 2019年获得5家国内一线品牌车厂量产项目定点，合作车型12款，该公司数据显示占据国内前装驾驶员监控系统70%的市场份额。一、多模态交互已初具量产条件此前，国内已经量产搭载基于视觉方案DMS的车型包括爱驰U5、小鹏G3、凯迪拉克CT6、广汽新能源AionLX等。
其中，爱驰U5将摄像头安装于A柱，可实时监控驾驶员的状态。当驾驶员出现打电话、打哈欠或者视线不注视前方三种情况时，系统都会进行语音播报提示，有效增加了行车安全性。
小鹏汽车之前发布的XmartOS1.5版本也显示，通过车内摄像头可实时检测驾驶员在行车过程中的疲劳行为特征（打呵欠、长时间闭眼等），在发生疲劳行为时及时做出预警。
而相对视觉、语音识别市场的迅速扩张，手势识别的市场应用推进则相对缓慢，但其中依然不乏大厂在推陈出新。
手势识别于2015年率先搭载于宝马7系，共7个手势动作。国内包括君马SEEK5（9个手势）、奇瑞瑞虎5X、小鹏G3尊享版等车型也有搭载，主要用于中控系统的基本操作。
另外，其他交互方式也在陆续搭载量产车上。例如，人脸识别于2018年开始在国内车型陆续搭载，包括零跑S01、星途TX、WEYVV6、威马EX5、吉利星越等车型。
日前，长安欧尚X7也最新增加了带有人脸识别全自动泊车太空逍遥版，同时也是同级唯一搭载人脸识别系统的车型。
车窗交互、车身交互、静脉识别、指纹识别、AR导航等新型交互方式也陆续搭载到零跑S01、现代新胜达、荣威MarvelX等车型。
不过，大众问问CEO张人杰表示，实现车载多模态交互量产的第一步是提升车载语音的普及度。只有语音交互变成用户的强需求，结合其他模态才有意义。