眼睛会动,还能与人交谈、拥抱,iCub人形机器人这次具备远程操控

简介: 眼睛会动,还能与人交谈、拥抱,iCub人形机器人这次具备远程操控

早在 2011 年,我们就已经听说过像孩子一样的 iCub 人形机器人,它长这样(下图 1 右):

其实 iCub 的第一个版本可追溯到 2008 年,最初是根据一个三岁孩子设计的,现在算来,它应该是一个十多岁的「青少年」。近日,原班团队,即来自意大利理工学院(Italian Institute of Technology,IIT)的研究者,又为我们带来了更加先进的 iCub 3 双足机器人,相比于初代 iCub,iCub 3 又长高了一点,并且更大、更强、更重。

图 1:更大的 iCub3(左),初代 iCub(右)

iCub3 比初代 iCub 高了 25 厘米(到 1.25 米),重量也增加了 19 公斤(至 52 公斤),具有 54 个自由度,腿部更加强大,并在包括躯干、肩膀和腿在内的部位安装执行器。iCub3 头部和初代 iCub 头部保持一致,但脖子长了一点,使得 iCub3 比例更加协调。

在传感器方面,iCub3 有一个深度摄像头和最新一代的力感应,可承受更高的机器人重量。iCub3 具有更高容量的电池,位于躯干组件内。

iCub 3 头部内置了可当做眼睛的立体旋转摄像头、可反映嘴部与眉毛动作的 LED 线条。

我们可以将 iCub3 理解为一个化身平台(avatar platform)——也就是说,一个人形机器人,可以体现出更具生物类型的远程人形机器人。

在通过从热那亚到威尼斯实现的演示中,远程操控用到了所谓的 iFeel 系统。IIT 可穿戴 iFeel 套件跟踪操作员的身体动作,化身系统将其传输到威尼斯的 iCub3,然后 iCub3 会像研究者在热那亚一样移动。此外,用户还需配备一个头戴设备,可以跟踪自身的表情、眼部运动。这些头部特征被投射到 iCub3 上,以高保真度再现:化身和人类具有非常相似的面部表情。


用户戴着感应手套,手套可以跟踪他的手部动作,同时提供触觉反馈。


借助化身系统,远程用户可以与威尼斯的向导微笑、交谈和握手:化身相应地微笑、交谈和握手。


类似地,当向导在威尼斯拥抱虚拟形象时,热那亚的操作员也能感受到拥抱,这要归功于 IIT 的 iFeel 套装,该套装还提供上身触觉。此外,热那亚的远程用户和威尼斯的向导之间的对话是可能的,这要归功于记录和传输操作员语音的系统,以便化身可以在威尼斯重现它。传输通过标准光纤互联网连接进行传输,仅产生几毫秒的延迟。


完成上述功能,需要的设备包括:

  • HTC Vive PRO eye4 headset
  • VIVE Facial Tracker5
  • iFeel 感官和触觉套装
  • SenseGlove DK17 触觉手套
  • Cyberith Virtualizer Elite 28 全向跑步机


总而言之,所有这些设备都允许操纵、运动、声音甚至面部表情从人类重新定位到机器人。面部表情重定向适用于眼睛注视和眼睑状态以及用户的嘴巴。


「我们的 iCub 3 化身系统在一个有腿的人形机器人上进行了验证,允许进行远程语言、非语言和物理交互,这是寻找在所有交互方面模拟人类平台完美起点。」 IIT 项目协调员 Daniele Pucci 表示。「在不久的将来我们可以期望这个系统在所谓的元宇宙中的应用,它实际上是远程人类化身。」

参考链接:https://spectrum.ieee.org/icub-is-growing-up

相关文章
|
3月前
|
人工智能 开发者
黑神话:悟空中的AI行为树设计
【8月更文第26天】在《黑神话:悟空》这款游戏中,NPC(非玩家角色)的智能行为对于创造一个富有沉浸感的游戏世界至关重要。为了实现复杂的敌人行为模式,游戏开发团队采用了行为树作为NPC决策的核心架构。本文将详细介绍《黑神话:悟空》中NPC AI的设计原理,特别关注行为树的设计与实现。
182 0
|
3月前
|
传感器 编解码 前端开发
平行操控之高危作业-远程无人挖掘机优势及技术实现
无人挖掘机在土石方、煤矿开采、冶金建筑等领域发挥重要作用,通过精确导航、高精度传感与控制技术,提升作业效率与安全性。在建筑场景中,实现自主避障、自动装车等功能,提高施工效率并降低成本。应急救援时,无人挖掘机能迅速进入危险区域执行任务。技术上,利用低延迟音视频传输与控制技术,实现远程高效操控,支持多种协议与格式,确保稳定流畅的远程作业体验。
|
算法 机器人 程序员
|
编解码 人工智能 算法
机器狗是怎么动起来的?这个up主花三个月自制硬核“机器人心脏”,可承载机械战甲
机器狗是怎么动起来的?这个up主花三个月自制硬核“机器人心脏”,可承载机械战甲
239 0
谷歌获批可以部署动作感应设备Soli传感器,为语言、行动有障碍人士提供便利
该传感器可以嵌入可穿戴设备以及手机、电脑、汽车等。
270 0
|
新零售 人工智能 自然语言处理
剧透 | 未来人机交互方式原来是这样的...
云栖社区将于2018年3月31日在北京中关村创业大街3W咖啡举办一场《未来人机交互技术沙龙》,届时将有4位行业顶级专家对人机交互技术进行全方位的解读。
3511 0