机器人|将机器人用作博物馆指南,通过脑机接口将远程视觉信息发送给操作它的人


机器人|将机器人用作博物馆指南,通过脑机接口将远程视觉信息发送给操作它的人

文章图片


机器人|将机器人用作博物馆指南,通过脑机接口将远程视觉信息发送给操作它的人

文章图片


机器人|将机器人用作博物馆指南,通过脑机接口将远程视觉信息发送给操作它的人

文章图片


脑机接口操作博物馆指南 , 将机器人用作博物馆指南 , 通过脑机接口将远程视觉信息发送给操作它的人 。 在应用程序中 , 人可以使用P300信号来控制机器人的导航 。 这为用户提供了远程呈现的感觉 。 在这个实验中 , 更多的焦点放在了脑机接口系统中使用的GUI 。 GUI是不同的 , 因为它对用户更友好 , 并且不像以前案例研究中使用的UI那样对齐为网格 。

提议的脑机接口系统使用了P300脑信号 , 并且没有讨论有关脑机接口会话的细节 。 在新的GUI中 , 命令的选择是通过关注闪烁的导航箭头来完成的 。 这类似于早期实验中使用的古怪范式 。 为了简化UI , 将选择过程分为两部分 。 每个部分都有不同的P300启发界面 。 第一部分是在输入阶段开始之前 。 在此 , 用户被要求在两个机器人之间进行选择 , 具体取决于他们想要访问的位置 。

在讨论的应用程序中 , 一个机器人位于计算机科学系 , 而一个机器人位于植物园 。 两个机器人都配备了用于运动的轮子、微控制器、红外传感器、用于避免碰撞的声纳环和一个摄像头 。 一般来说 , 第一部分可以被认为是两个机器人之间的选择 , 机器人一和机器人二 , 它们位于两个不同的位置 。 所有这些都是使用基于P300的大脑信号来控制的 。 中间的屏幕显示使用机器人摄像头生成的输出 。

系统设计:机器人与脑机接口系统之间的通信模式遵循客户端-服务器架构 , 网络堆栈中使用传输控制协议/互联网协议 。 机器人扮演客户端角色 , 脑机接口系统扮演服务器角色 。 最初 , 机器人尝试与脑机接口系统建立连接并等待命令执行 。 脑机接口架构将来自大脑的信号转换成相应的命令;然后服务器将命令发送到在机器人端运行的客户端程序 。 机器人通常可以处理三种类型的命令:开始会话命令 , 执行命令和结束会话命令 。
【机器人|将机器人用作博物馆指南,通过脑机接口将远程视觉信息发送给操作它的人】
当客户端-服务器连接建立时 , 机器人接收到“开始”命令 , 从而可以通过大脑信号直接控制机器人 。 通过接收“结束”命令停止该控制 。 在服务器端 , 发送要执行的命令后 , 服务器等待动作执行 。 如果动作完成 , 服务器将从客户端获取动作的结果 。 但是 , 如果命令不正确 , 客户端会向服务器发送警告命令 , 服务器也会以同样的命令响应 。 结果:使用此应用程序 , 由于远程呈现 , 人们可以通过机器人参观博物馆 。

在二维地图的帮助下 , 可以模拟机器人行走的位置 。 人们可以借助图形用户界面查看机器人摄像头的视野 , 然后决定下一个位移 。 可以通过路径规划来避免传感器的错误 。 除了使用脑电图记录的大脑信号外 , 控制命令还依赖于身体其他部分产生的互补信号 。 应用类似于取一杯水的应用 。 然而 , 主要区别在于它使用多种传感器数据对控制命令进行分类 。

科学家用了生物反馈因素 , 这取决于用户的意图、注意力和注意力 。 然后将其用于识别用户的心理状态 , 并以此为基础指示机器人执行某些任务 。 在这个应用程序中执行的任务与非常相似 。 将实验分为培训课程、在线课程和机器人课程的方式也可以看出相似之处 。 这些课程与生物反馈相结合 , 以支持基于特定阈值的决策 。 使用生物因素是因为它提供了用户的心理状态 。 该架构使用了脑电图信号的组合 , 这些信号是使用视觉刺激与跟踪用户眼球运动的跟踪器一起引发的 。 这种基于生物反馈的系统用于提取注意力、意图和焦点等特征 。