与智能设备对话，什么是好的聊天对话体验？( 三 ) 与智能设备交流是人类的梦想

对话示例3（用户正向评价）
联系上下文
用户期望与智能设备聊天时，聊天过程能联系上下文，不要前后逻辑矛盾。
文章插图
对话示例4（用户负向评价）
表达多样化
用户期望设备的回复内容更多样化和丰富，以避免让用户觉得是设定好的程序。
文章插图
对话示例5（用户正向评价）
文章插图
对话示例6（用户负向评价）
表达自然流畅
用户期望自然流畅的表达，聊天对话符合人们日常说话用语和习惯。
文章插图
对话示例7（用户正向评价）
文章插图
对话示例8（用户负向评价）
四、小结
以智能音箱聊天对话体验评估为课题，本研究提出了一套完整的评估方法，并建立了针对聊天型对话体验的指标体系和评估框架，该指标体系及其权重一定程度上反映了用户对聊天对话体验的需求和关注程度，可以为后续产品体验优化提供参考方向。
然而，本研究也存在一定的局限性，一方面，目前多数智能设备会同时具备任务型对话和聊天型对话两种能力，从用户视角可能无法清晰区分两种自然语言对话场景；另一方面，由于与智能设备对话仍处于探索期，产品迭代很快，用户的预期也会随之改变，因此，评估指标体系的权重也可能发生变化，未来可能需要持续监测和修改评估指标体系。
参考文献
Chat with Smart Conversational Agents：How to Evaluate Chat Experience in Smart Home. Xiantao Chen, Jiaqi Mi, Menghua Jia, Yajuan Han, Moli Zhou, Tian Wu. MobileHCI 2019.
作者
百度技术中台UER小分队