Meta公布机器人触觉感知能力研究成果:传感器理解/操作外界物体

IT之家 2024-11-04 12:14:57

IT之家11月4日消息,Meta发布新闻稿,介绍了旗下FAIR(基础人工智能研究)团队对于机器人触觉感知能力的研究情况,这项研究旨在让机器人通过触觉方式进一步理解和操作外界物体。

Meta表示,打造相应AI机器人的核心在于让机器人的传感器感知理解物理世界,同时利用“AI大脑”精确控制机器人对物理世界进行反应,而团队目前开发的机器人触觉感知能力主要就是为了让机器人检测其交互的物体的材质与触感,以便于让AI判断机器人应当如何操作这些设备(例如拿起鸡蛋等场景)。

IT之家参考Meta公布的文献获悉,Meta目前一共公布了MetaSparsh、Digit360和MetaDigitPlexus等多项研究成果,其中MetaSparsh是一种基于AI的触觉编码器,主要利用AI的自我监督学习能力实现跨场景的触觉感知,让机器人的AI大脑在学习对于某种物体的“触感”后,即可在各种场景灵活“感知”相关物品的特性。

而Digit360则是一种高精度传感器,该传感器主要部署在机器人手指上,号称具备多模态感知能力,能够捕捉细微的触觉变化。Meta声称,该传感器可以模拟人类的触觉,支持振动、温度等多重感知能力。

MetaDigitPlexus则是一个开放性的平台,号称能够整合多种传感器,使机器人能够更全面地通过传感器感知周围环境,并通过统一标准实时对接AI大脑进行反应。

此外,Meta还开发了PARTNR基准,这是一项用于评估人机协作能力的测试框架,旨在测试机器人AI系统在实际生活场景中的计划和推理能力,该测试框架内置10万个自然语言任务,能够模拟居家环境中的各种情境,帮助开发者测试机器人对于自然语言的理解能力及执行能力。

Meta现已对外公开这些技术和数据供研究者使用,包括论文、开源代码和模型等,鼓励更多研究社区参与触觉技术的创新研究,IT之家附相关项目地址如下(点此访问)。

0 阅读:2