眼睛会动,还能与人交谈、拥抱,iCub人形机器人这次具备远程操控

简介: 眼睛会动,还能与人交谈、拥抱,iCub人形机器人这次具备远程操控

早在 2011 年,我们就已经听说过像孩子一样的 iCub 人形机器人,它长这样(下图 1 右):

其实 iCub 的第一个版本可追溯到 2008 年,最初是根据一个三岁孩子设计的,现在算来,它应该是一个十多岁的「青少年」。近日,原班团队,即来自意大利理工学院(Italian Institute of Technology,IIT)的研究者,又为我们带来了更加先进的 iCub 3 双足机器人,相比于初代 iCub,iCub 3 又长高了一点,并且更大、更强、更重。

图 1:更大的 iCub3(左),初代 iCub(右)

iCub3 比初代 iCub 高了 25 厘米(到 1.25 米),重量也增加了 19 公斤(至 52 公斤),具有 54 个自由度,腿部更加强大,并在包括躯干、肩膀和腿在内的部位安装执行器。iCub3 头部和初代 iCub 头部保持一致,但脖子长了一点,使得 iCub3 比例更加协调。

在传感器方面,iCub3 有一个深度摄像头和最新一代的力感应,可承受更高的机器人重量。iCub3 具有更高容量的电池,位于躯干组件内。

iCub 3 头部内置了可当做眼睛的立体旋转摄像头、可反映嘴部与眉毛动作的 LED 线条。

我们可以将 iCub3 理解为一个化身平台(avatar platform)——也就是说,一个人形机器人,可以体现出更具生物类型的远程人形机器人。

在通过从热那亚到威尼斯实现的演示中,远程操控用到了所谓的 iFeel 系统。IIT 可穿戴 iFeel 套件跟踪操作员的身体动作,化身系统将其传输到威尼斯的 iCub3,然后 iCub3 会像研究者在热那亚一样移动。此外,用户还需配备一个头戴设备,可以跟踪自身的表情、眼部运动。这些头部特征被投射到 iCub3 上,以高保真度再现:化身和人类具有非常相似的面部表情。


用户戴着感应手套,手套可以跟踪他的手部动作,同时提供触觉反馈。


借助化身系统,远程用户可以与威尼斯的向导微笑、交谈和握手:化身相应地微笑、交谈和握手。


类似地,当向导在威尼斯拥抱虚拟形象时,热那亚的操作员也能感受到拥抱,这要归功于 IIT 的 iFeel 套装,该套装还提供上身触觉。此外,热那亚的远程用户和威尼斯的向导之间的对话是可能的,这要归功于记录和传输操作员语音的系统,以便化身可以在威尼斯重现它。传输通过标准光纤互联网连接进行传输,仅产生几毫秒的延迟。


完成上述功能,需要的设备包括:

  • HTC Vive PRO eye4 headset
  • VIVE Facial Tracker5
  • iFeel 感官和触觉套装
  • SenseGlove DK17 触觉手套
  • Cyberith Virtualizer Elite 28 全向跑步机


总而言之,所有这些设备都允许操纵、运动、声音甚至面部表情从人类重新定位到机器人。面部表情重定向适用于眼睛注视和眼睑状态以及用户的嘴巴。


「我们的 iCub 3 化身系统在一个有腿的人形机器人上进行了验证,允许进行远程语言、非语言和物理交互,这是寻找在所有交互方面模拟人类平台完美起点。」 IIT 项目协调员 Daniele Pucci 表示。「在不久的将来我们可以期望这个系统在所谓的元宇宙中的应用,它实际上是远程人类化身。」

参考链接:https://spectrum.ieee.org/icub-is-growing-up

相关文章
|
5月前
|
传感器 编解码 前端开发
平行操控之高危作业-远程无人挖掘机优势及技术实现
无人挖掘机在土石方、煤矿开采、冶金建筑等领域发挥重要作用,通过精确导航、高精度传感与控制技术,提升作业效率与安全性。在建筑场景中,实现自主避障、自动装车等功能,提高施工效率并降低成本。应急救援时,无人挖掘机能迅速进入危险区域执行任务。技术上,利用低延迟音视频传输与控制技术,实现远程高效操控,支持多种协议与格式,确保稳定流畅的远程作业体验。
|
传感器 机器人 新制造
让机器人的触觉感官更灵敏、稳定、高效,腾讯Robotics X在传感器上火力全开(2)
让机器人的触觉感官更灵敏、稳定、高效,腾讯Robotics X在传感器上火力全开
145 0
|
传感器 机器学习/深度学习 编解码
让机器人的触觉感官更灵敏、稳定、高效,腾讯Robotics X在传感器上火力全开(1)
让机器人的触觉感官更灵敏、稳定、高效,腾讯Robotics X在传感器上火力全开
183 0
|
传感器 自动驾驶 算法
ADAS的“眼睛”很难搞也很关键
ADAS的“眼睛”很难搞也很关键
ADAS的“眼睛”很难搞也很关键
|
算法 机器人 程序员
|
自动驾驶
展望︱2017年 手机操控无人车
展望︱2017年 手机操控无人车
展望︱2017年 手机操控无人车
|
机器人
DNA机器人进化!这款软件能用几分钟造出复杂结构纳米设备,进入你的身体执行任务
DNA机器人进化!这款软件能用几分钟造出复杂结构纳米设备,进入你的身体执行任务
180 0
|
编解码 人工智能 算法
机器狗是怎么动起来的?这个up主花三个月自制硬核“机器人心脏”,可承载机械战甲
机器狗是怎么动起来的?这个up主花三个月自制硬核“机器人心脏”,可承载机械战甲
247 0
|
人工智能 自动驾驶 安全
我把无人车的避障技术装进了iPad,刺激手部为盲人导航,杂货间也能畅通无阻
我把无人车的避障技术装进了iPad,刺激手部为盲人导航,杂货间也能畅通无阻
202 0
谷歌获批可以部署动作感应设备Soli传感器,为语言、行动有障碍人士提供便利
该传感器可以嵌入可穿戴设备以及手机、电脑、汽车等。
272 0