元宇宙之眼!Meta机械仿生眼专利曝光,还要装在仿生人体内(2)

简介: 元宇宙之眼!Meta机械仿生眼专利曝光,还要装在仿生人体内

仿生眼可以被用作更精确地追踪人眼运动的工具,来观测它在屏幕上以及图像上停留的时间。


比如,广告中经常会用眼动追踪技术观察用户对广告的喜爱程度。


另外,眼动追踪技术也可以被用于构建Facebook的AR/VR应用程序。

 

就比如一直爆火的Oculus头显,如果未来有了这项技术的加持,简直如虎添翼。

 

 

正如知情人士所指出,这种技术可能会加速公司的增强现实和虚拟现实应用的发展,这些应用严重依赖于眼球追踪。

 

不管怎么说,这项机械仿生眼技术更加坚定了Meta进军元宇宙的决心。

 

一举打通元宇宙「视触听」


这已经不是Meta第一次考虑给机器人加入人类感官特征了。

 

早在去年11月,Meta与卡内基梅隆大学(CMU)合作开发了一款轻量级,触觉传感机器人「皮肤」,可以给机器人赋予触觉。

 

 

据称,机械仿生眼和人造皮肤的探索是Meta人工智能部门在2019年进行更广泛的机器人实验的一部分。

 

这款皮肤名叫ReSkin,厚度只有2-3mm,表面类似橡胶具有弹性。

 

 

仔细看图,可以发现其内部嵌入了磁性颗粒。当按压/触摸产生时,皮肤表面产生形变带动内部粒子的磁场变化。这些变化会被磁力计监测收集,并反馈给通过自监督学习训练过的AI模型。

 

 

扎克伯格表示,可以用于元宇宙中的虚拟对象,使我们与之交互时获得触觉感受。

 

 

Meta首席人工智能科学家 Yann LeCun认为机器人技术成为了研究人工智能的方式,他曾表示,机器人技术是扎克伯格抵制的一个领域。

 

LeCun曾表示,「这是人工智能研究人员试图到达的地方。感知、推理、计划和行动的形成一个不断循环的完整闭环,最后能够从环境中获得反馈。」

 

 

仿生眼主视觉,ReSkin电子皮肤主触觉,还有Meta最具代表性的Oculus头显融合了视觉和听觉效果。

 

可以看出,Meta在进军元宇宙这条路上已经打通了视觉、听觉、触觉这人类三大感官体验。

 

其实,在触觉方面,前段时间,Meta还揭秘了其秘密研发七年的项目「气动触觉手套」。

 

这种触觉手套可以通过气囊让你体验到抓取虚拟物体时的真实触感。对于Meta来说,这款手套和其他可穿戴技术,都将让我们通往在VR和AR中实现互动的未来。

 

 

但是,真正元宇宙中的体验不仅仅包括「视触听」这三种感官特征,还要能够闻到不同气味,尝到不同的味道。

 

目前来说,在Meta元宇宙技术体系中,没有提到的感觉便是气味和味道,这对攻克技术难题有了更高的要求。

 

不过,未来没有什么不可能。


谁说Meta元宇宙是PPT?


2021年11月,Facebook在Connect大会上改名Meta,计划投入千亿美元,要大举进军元宇宙。

 

Meta这一举动将所有人的视线转移到其创造的虚拟世界中。


 

其实,Meta在元宇宙的布局不仅仅是上面所提到的项目,还有关于Avatar的研发等。

 

元宇宙是一个具有沉浸式空间感的3D数字化世界。

 

在这个世界中,人们通过穿戴VR设备或是芯片植入的方式,创造出人类的化身 (Avatar) ,融入其中。

 

 

在元宇宙中不只有人,还有虚拟物品,更重要的是还有机器人。

 

除了人-人、人-物交互以外,人-机、机-机、机-物交互也十分重要。

 

与机器人相关的,叫做机器人元宇宙。机器人元宇宙是机器人理解物理世界的基础。上述提到的仿生眼、人造皮肤等技术,都是为了让机器人更加的类人、逼真。

 

 

Meta在提升人类在元宇宙中的体验也做了很多的尝试,有相当多的突破。

 

比如,Codec Avatar这个项目就是一个利用3D捕捉和AI技术,创造逼真人物头像的系统。这个项目从最初的高清头像开始,一步步发展到全身的虚拟化身。

 

 

在这个过程中,全身视频编解码器被研发出来,使得元宇宙中的人类avatars可以支持更复杂的眼部、面部、四肢、躯干等部位的运动。举例来说,项目团队通过EMG腕带进行XR输入,对人的手部动作的方式做了精准的测量。

 

 

人类化身都取得了很多突破,那么通过物理手段对现实世界中的物品在元宇宙中进行映射也不在话下。

 

比如,衣服在元宇宙中的真实模拟就十分逼真。不光完美复刻了衣服面料的弹性,如果抖动衣服,衣服表面的褶皱也栩栩如生。

 

 

Meta所有项目的研发都是为了让人能够在元宇宙中有更好的体验。这也更加印证了,小扎的进军元宇宙的宣言不是纸上谈兵。

 

Meta拓展元宇宙的下一步,你期待吗?

 


参考资料:

https://www.businessinsider.com/facebook-patents-animatronic-eyeball-robot-head-resembling-human-skin-meta-2022-1

https://patft.uspto.gov/netacgi/nph-Parser?Sect1=PTO2&Sect2=HITOFF&p=3&u=%2Fnetahtml%2FPTO%2Fsearch-bool.html&r=119&f=G&l=50&co1=AND&d=PTXT&s1=facebook.ASNM.&OS=AN/facebook&RS=AN/facebook

相关文章
|
定位技术 API 网络架构
地图图层接入:从mapbox转向cesium
由于地图坐标系的不统一,地图图商提供的图层服务也各有特色,在图层对接的开发过程中常会遇到许多坑,从二维图层到三维图层,地图引擎mapbox再到cesium,本文将分享笔者在近期地图图层接入过程中总结的一些经验。
5492 10
|
存储 缓存 算法
淘宝API跨平台数据同步,多店管理一屏搞定!
商家多平台运营常面临库存、订单、数据分散难题。通过淘宝开放平台API构建数据中台,实现跨平台库存同步、订单统一处理与智能销售分析。结合智能算法与自动化流程,提升订单处理效率200%,降低人力成本40%,助力商家实现数字化经营,全面打破数据孤岛,提升运营效率与决策能力。
|
9月前
|
数据采集 运维 DataWorks
【赵渝强老师】阿里云大数据集成开发平台DataWorks
DataWorks是阿里云一站式大数据开发治理平台,支持数据集成、开发、建模、分析、质量监控、服务化及迁移等全链路功能,兼容多种计算引擎,助力企业高效构建数据中台,实现数据资产化与价值挖掘。
755 6
|
存储 人工智能 API
SPO:如何优化提示词?大模型最懂如何优化自己!开源自监督提示词优化工具,让AI自主优化提示词
本文介绍由DeepWisdom与香港科技大学联合研发的SPO框架,通过自我监督机制实现大语言模型提示优化,仅需3个样本即可达到SOTA效果,优化成本降低至传统方法的1.1%-5.6%。
3080 0
SPO:如何优化提示词?大模型最懂如何优化自己!开源自监督提示词优化工具,让AI自主优化提示词
|
并行计算 算法 C++
《探索C++在3D重建中的算法与技术要点》
3D重建是计算机视觉的重要技术,广泛应用于多个行业。C++因其高效性和对底层硬件的良好控制,成为实现3D重建算法的首选语言。本文介绍了多视图立体视觉、立体匹配、点云处理与重建、网格重建与优化、纹理映射及CUDA加速等关键技术,详细阐述了各算法的原理和C++实现要点。
502 18
|
人工智能 自然语言处理 算法
大模型备案、登记全流程攻略
在AI浪潮下,大模型技术迅猛发展,为各行业带来变革。为确保算法安全有序发展,需进行相关备案登记。具体包括:大模型备案(面向公众提供生成式服务)、大模型登记(借助第三方大模型)、算法备案(5类算法)及双新评估(舆论属性服务)。未及时备案将面临法律处罚,备案流程涉及属地初审、中央终审等环节,周期约3-4个月。境外模型和特定行业有额外限制,备案后仍需常态化安全管理。
|
监控 安全 数据挖掘
BPM业务流程管理是什么?有哪些值得推荐的BPM工具?
本文介绍了业务流程管理(BPM)的概念、历史发展及三种类型:以集成为中心、以人为中心和以文档为中心。随后推荐了五款 BPM 工具:板栗看板、Pega、Appian、K2 和 Bonitasoft,分别强调它们在界面设计、规则引擎、低代码开发、灵活集成和开源定制等方面的优势。企业可根据自身需求选择合适的工具优化业务流程。
2258 2
BPM业务流程管理是什么?有哪些值得推荐的BPM工具?
请拥有edu邮箱的同学来领取专(免)属(费)GPU!
300小时免费GPU等你来领!魔搭GPU资源福利社,为你注入动力!
|
Cloud Native 持续交付 Docker
云原生技术实践:Docker容器化部署教程
【9月更文挑战第4天】本文将引导你了解如何利用Docker这一云原生技术的核心工具,实现应用的容器化部署。文章不仅提供了详细的步骤和代码示例,还深入探讨了云原生技术背后的哲学,帮助你理解为何容器化在现代软件开发中变得如此重要,并指导你如何在实际操作中运用这些知识。
|
测试技术 Linux Go

热门文章

最新文章