VR陀螺|微软新项目：让AR眼镜HoloLens成为视障人士的眼睛( 三 ) 以下文章来源于微软研究院AI头条

研究人员还仔细观察了Theo自由使用系统的方式。比如在一次家庭用餐时， Theo开始巧妙地反复左右转动头部，让系统说出正在与他说话的人的名字。
“Theo在用这个技术保持对谈话者的空间注意力， ”Morrison当时感到很惊讶， “我们之前并没有想到，这对他来说无疑是一种行之有效的保持注意力的方式。如果他能保持注意力，他就可以与谈话者将话题进行下去。 ”
在实际测试中，更多的用途证实了这项技术对帮助视障儿童学习社会互动的潜能。
和其他失明儿童一样， Theo在社交场合中也会将头搁在桌子上露出一只耳朵。研究人员和Theo玩了一系列游戏，来发掘他用身体和头部交流时可能产生的力量。
在游戏中，研究人员和Theo要解决一个小组问题。 Theo知道问题的答案，研究员们只知道问题的主题，而且只有在Theo看着他们时，他们才能交谈。如果Theo移开视线，他们必须立刻停止讨论。 “那一刻， Theo突然意识到自己能够掌控一段谈话。他开始理解‘看到’他人的力量，它不仅赋予了他交流的技能，更使他习得了一套全新的社会能力。 ”
现在Theo很少把头放在桌子上说话了。无论是否带着特制的HoloLens ， Theo都会将自己的身体和脸面向想要谈话的人。这是否会为Theo带来长期的变化还是一个未知数，研究团队也尚不能确定其他失明或弱视力儿童是否也会做出类似的反应。因此研究团队正在进入下一阶段，研究这项技术对更多儿童、年龄范围更广泛的人群的影响。

文章图片
失明少年Theo正在厨房里参与用户测试
ProjectTokyo的未来
为了构建适用于更多人的智能个人代理系统，更广泛的研究工作正在进行中，包括让用户更自由地根据偏好调整系统的机器学习技术。例如，微软剑桥研究院机器学习研究员SebastianTschiatschek正在研究用户如何告知系统他们希望听到的信息的种类和数量。
由于用户的视力水平不同，对信息的需求也不一样。个性化的需求让Tschiatschek必须采取非常规的机器学习方法， “我们想以某种数学形式将问题形式化，但对这个问题来说并不容易。许多开发工作都是通过尝试，真正与人互动，了解他们的好恶，从而增强算法来实现。 ”此外，用户在系统提供已知信息时会感到失望，还有很多这样的问题尚待研究团队解决。
最终， ProjectTokyo将构建可扩展所有用户能力的智能个人代理。研究团队将与视障社区中的更多儿童继续探索，包括Morrison先天失明的7岁儿子Ronan 。
“我们在Theo身上看到的情况让人倍受鼓舞，他正在以前所未有的方式掌控自己的世界， ”Morrison充满期待， “我认为我们将在Ronan和更多的人身上看到这一点。 ”