Sonicsense通过声学振动通过类似人类的传感增强了机器人
杜克大学的SonicSense:机器人感知的游戏改变者
杜克大学的最新创新SonicSense将彻底改变机器人感知和与周围环境互动的方式。通过摆脱传统的基于视觉的系统,SonicSense使用声波振动为机器人提供了一种新的“感知”周围世界的方式,就像人类使用多种感官来导航和理解环境一样。
机器人感知的挑战
机器人长期以来在准确感知和与物体互动方面面临挑战。虽然人类可以轻松整合多种感官,但机器人主要依赖视觉数据。这种局限性常常阻碍它们处理视觉线索不足的复杂场景。
SonicSense:一大进步
SonicSense通过引入声学感知解决了这些局限性。这项技术使机器人能够通过物理互动获取物体的详细信息,模仿人类使用触觉和声音的方式。这是使机器人更通用、更能理解环境的重要一步。
SonicSense技术的分解
SonicSense的核心是一个四指机器人手,每根手指的指尖都配备了一个接触式麦克风。这些传感器捕捉机器人通过敲击、抓取或摇晃等动作与物体互动时产生的振动。SonicSense的独特之处在于其过滤环境噪声的能力,确保收集的数据尽可能干净。
研究的主要作者刘家勋分享道:“我们希望创造一个能与各种日常物体合作的解决方案,增强机器人‘感知’和理解周围世界的能力。”
SonicSense最吸引人的方面之一是其可访问性。该系统使用现成的组件构建,包括音乐家常用的接触式麦克风和3D打印部件。总成本仅略高于200美元,SonicSense不仅创新而且价格亲民,为更广泛的应用和进一步发展铺平了道路。
SonicSense:通过手持声波振动进行物体感知
在YouTube上观看此视频超越视觉识别的进步
传统的基于视觉的系统在处理某些物体时会遇到困难,例如透明、反光或具有复杂几何形状的物体。陈博远教授解释道:“虽然视觉至关重要,但声音可以提供眼睛无法看到的额外信息层。”
SonicSense通过其多指方法和先进的AI算法克服了这些挑战。它可以识别由不同材料制成的物体,理解复杂的形状,甚至判断容器内的内容——这些任务对仅依赖视觉的系统来说是困难的。
通过同时从四个手指收集数据,SonicSense可以创建详细的3D重建并准确确定材料组成。对于新物体,可能需要多达20次互动,但对于熟悉的物体,仅四次互动就足以进行准确识别。
现实世界的应用和测试
SonicSense不仅仅是实验室实验;它具有现实世界的潜力。它在传统机器人系统难以应对的场景中进行了测试,如计算容器中的骰子数量、测量瓶子中的液位,以及通过表面探索重建3D形状。
这些能力对制造业和质量控制等行业至关重要,精准的物体操作是关键。与早期的声学感知尝试不同,SonicSense的多指方法和噪声过滤使其非常适合需要多种感官输入的动态工业环境。
研究团队目前正在扩展SonicSense的功能,以同时处理多个物体。陈教授乐观地说:“这只是开始。我们看到SonicSense被整合到更先进的机器人手中,使机器人能够执行需要细腻触觉的任务。”
他们还在开发物体跟踪算法,以帮助机器人在杂乱、动态的环境中导航和互动。计划增加压力和温度感知将进一步增强系统的类人操作能力。
总结
SonicSense标志着机器人感知的重大进步,展示了声学感知如何增强视觉系统,创造出更通用和适应性更强的机器人。随着这项技术的发展,其价格亲民和广泛的应用前景表明,未来机器人可以以接近人类能力的复杂性与环境互动。
相关文章
Khosla支持的Genesis AI推出全栈机器人解决方案
Genesis AI,一家获得1.05亿美元种子轮融资以开发机器人基础AI的初创公司,已推出其首款模型GENE-26.5,该模型配备了出乎意料地灵巧的双手。在一段演示视频中,该公司展示了其自主研发的机器人双手执行的各种高级任务。“模型始终是我们的首要目标,因为更优越的智能源于更先进的模型,”Genesis联合创始人兼首席执行官周贤(Zhou Xian)告诉TechCrunch。然而,该公司很快认识到硬件控制的必要性。“因此,我们选择采取全栈方法,”他解释道。其他资金充足的公司在AI与机器人技
9亿美元融资将如何塑造小鹏汽车的机器人愿景
小鹏汽车机器人事业部获得逾9亿美元融资,投后估值突破63亿美元,将加速物理人工智能的部署。图片来源:小鹏汽车小鹏汽车欧洲品牌与市场总监斯文·德·斯梅特(Sven De Smet)将此轮估值超过9亿美元的A轮融资,视为类人机器人全球推广的关键时刻。作为具身AI领域的领军企业,小鹏汽车已签署股份购买协议,为其机器人子公司筹集逾9亿美元资金。此次交易是中国具身AI领域迄今为止规模最大的单轮私募融资。本轮
日本携手英伟达推出全球首个国家级人工智能基础设施
据NHK报道,日本经济产业省计划到2040年在18个行业部署约1000万台人工智能机器人,以应对该国日益严重的劳动力短缺问题。图片来源:NVIDIA日本政府联合行业领军企业及英伟达(NVIDIA),共同推出了被称为“全球首个国家级AI基础设施”的项目,旨在支持物理AI应用。英伟达已宣布与日本人工智能联盟Noetra建立合作伙伴关系,共同推出“英伟达维拉·鲁宾人工智能工厂”,以支持日本政府在物理人工
相关专题推荐
评论 (24)
0/500
Les robots avec SonicSense ressemblent enfin à quelque chose de Blade Runner! Mais sérieusement, cette technologie audio pourrait vraiment changer la donne pour les robots domestiques. Imaginez qu'ils puissent entendre une fuite d'eau avant même de la voir... ou détecter un bébé qui pleure à travers une porte. 🚀 #InnovationPratique
This SonicSense tech sounds wild! 🤯 Robots feeling the world through sound vibrations? It's like giving them superhuman hearing. Can't wait to see how this shakes up robotics!
This SonicSense tech is wild! Robots 'hearing' their surroundings? It’s like giving them superhero senses. Can’t wait to see this in action! 🤖
SonicSense sounds like a sci-fi gadget come to life! Using sound waves to help robots 'feel' their surroundings is wild. I wonder how this stacks up against human senses—could robots end up navigating better than us? 🤔
¡SonicSense es increíble! Me encanta cómo mejora la percepción de los robots con vibraciones acústicas. Es como darles un nuevo sentido. El único problema es que es un poco caro, pero vale la pena por la innovación. 🤖
杜克大学的SonicSense:机器人感知的游戏改变者
杜克大学的最新创新SonicSense将彻底改变机器人感知和与周围环境互动的方式。通过摆脱传统的基于视觉的系统,SonicSense使用声波振动为机器人提供了一种新的“感知”周围世界的方式,就像人类使用多种感官来导航和理解环境一样。
机器人感知的挑战
机器人长期以来在准确感知和与物体互动方面面临挑战。虽然人类可以轻松整合多种感官,但机器人主要依赖视觉数据。这种局限性常常阻碍它们处理视觉线索不足的复杂场景。
SonicSense:一大进步
SonicSense通过引入声学感知解决了这些局限性。这项技术使机器人能够通过物理互动获取物体的详细信息,模仿人类使用触觉和声音的方式。这是使机器人更通用、更能理解环境的重要一步。
SonicSense技术的分解
SonicSense的核心是一个四指机器人手,每根手指的指尖都配备了一个接触式麦克风。这些传感器捕捉机器人通过敲击、抓取或摇晃等动作与物体互动时产生的振动。SonicSense的独特之处在于其过滤环境噪声的能力,确保收集的数据尽可能干净。
研究的主要作者刘家勋分享道:“我们希望创造一个能与各种日常物体合作的解决方案,增强机器人‘感知’和理解周围世界的能力。”
SonicSense最吸引人的方面之一是其可访问性。该系统使用现成的组件构建,包括音乐家常用的接触式麦克风和3D打印部件。总成本仅略高于200美元,SonicSense不仅创新而且价格亲民,为更广泛的应用和进一步发展铺平了道路。
SonicSense:通过手持声波振动进行物体感知
超越视觉识别的进步
传统的基于视觉的系统在处理某些物体时会遇到困难,例如透明、反光或具有复杂几何形状的物体。陈博远教授解释道:“虽然视觉至关重要,但声音可以提供眼睛无法看到的额外信息层。”
SonicSense通过其多指方法和先进的AI算法克服了这些挑战。它可以识别由不同材料制成的物体,理解复杂的形状,甚至判断容器内的内容——这些任务对仅依赖视觉的系统来说是困难的。
通过同时从四个手指收集数据,SonicSense可以创建详细的3D重建并准确确定材料组成。对于新物体,可能需要多达20次互动,但对于熟悉的物体,仅四次互动就足以进行准确识别。
现实世界的应用和测试
SonicSense不仅仅是实验室实验;它具有现实世界的潜力。它在传统机器人系统难以应对的场景中进行了测试,如计算容器中的骰子数量、测量瓶子中的液位,以及通过表面探索重建3D形状。
这些能力对制造业和质量控制等行业至关重要,精准的物体操作是关键。与早期的声学感知尝试不同,SonicSense的多指方法和噪声过滤使其非常适合需要多种感官输入的动态工业环境。
研究团队目前正在扩展SonicSense的功能,以同时处理多个物体。陈教授乐观地说:“这只是开始。我们看到SonicSense被整合到更先进的机器人手中,使机器人能够执行需要细腻触觉的任务。”
他们还在开发物体跟踪算法,以帮助机器人在杂乱、动态的环境中导航和互动。计划增加压力和温度感知将进一步增强系统的类人操作能力。
总结
SonicSense标志着机器人感知的重大进步,展示了声学感知如何增强视觉系统,创造出更通用和适应性更强的机器人。随着这项技术的发展,其价格亲民和广泛的应用前景表明,未来机器人可以以接近人类能力的复杂性与环境互动。
Khosla支持的Genesis AI推出全栈机器人解决方案
Genesis AI,一家获得1.05亿美元种子轮融资以开发机器人基础AI的初创公司,已推出其首款模型GENE-26.5,该模型配备了出乎意料地灵巧的双手。在一段演示视频中,该公司展示了其自主研发的机器人双手执行的各种高级任务。“模型始终是我们的首要目标,因为更优越的智能源于更先进的模型,”Genesis联合创始人兼首席执行官周贤(Zhou Xian)告诉TechCrunch。然而,该公司很快认识到硬件控制的必要性。“因此,我们选择采取全栈方法,”他解释道。其他资金充足的公司在AI与机器人技
9亿美元融资将如何塑造小鹏汽车的机器人愿景
小鹏汽车机器人事业部获得逾9亿美元融资,投后估值突破63亿美元,将加速物理人工智能的部署。图片来源:小鹏汽车小鹏汽车欧洲品牌与市场总监斯文·德·斯梅特(Sven De Smet)将此轮估值超过9亿美元的A轮融资,视为类人机器人全球推广的关键时刻。作为具身AI领域的领军企业,小鹏汽车已签署股份购买协议,为其机器人子公司筹集逾9亿美元资金。此次交易是中国具身AI领域迄今为止规模最大的单轮私募融资。本轮
日本携手英伟达推出全球首个国家级人工智能基础设施
据NHK报道,日本经济产业省计划到2040年在18个行业部署约1000万台人工智能机器人,以应对该国日益严重的劳动力短缺问题。图片来源:NVIDIA日本政府联合行业领军企业及英伟达(NVIDIA),共同推出了被称为“全球首个国家级AI基础设施”的项目,旨在支持物理AI应用。英伟达已宣布与日本人工智能联盟Noetra建立合作伙伴关系,共同推出“英伟达维拉·鲁宾人工智能工厂”,以支持日本政府在物理人工
Les robots avec SonicSense ressemblent enfin à quelque chose de Blade Runner! Mais sérieusement, cette technologie audio pourrait vraiment changer la donne pour les robots domestiques. Imaginez qu'ils puissent entendre une fuite d'eau avant même de la voir... ou détecter un bébé qui pleure à travers une porte. 🚀 #InnovationPratique
This SonicSense tech sounds wild! 🤯 Robots feeling the world through sound vibrations? It's like giving them superhuman hearing. Can't wait to see how this shakes up robotics!
This SonicSense tech is wild! Robots 'hearing' their surroundings? It’s like giving them superhero senses. Can’t wait to see this in action! 🤖
SonicSense sounds like a sci-fi gadget come to life! Using sound waves to help robots 'feel' their surroundings is wild. I wonder how this stacks up against human senses—could robots end up navigating better than us? 🤔
¡SonicSense es increíble! Me encanta cómo mejora la percepción de los robots con vibraciones acústicas. Es como darles un nuevo sentido. El único problema es que es un poco caro, pero vale la pena por la innovación. 🤖





首页






