Rhoda 的机器人挡住摄像头,只靠触觉找出有纹理的球
Rhoda AI 10 月 13 日的文章把新触觉传感器和预测未来触觉信号的模型放在一起。在蒙住摄像头的演示里,机器人取出了训练时没见过的纹理球。
一句话: Rhoda AI 发布了一款触觉传感器,以及 Direct Video-Action 模型的触觉版本:它既预测未来画面,也预测未来的触觉。腕部和头部摄像头被挡住后,机器人只在一颗光滑球和一颗纹理球上训练过,仍从七颗球里取出了纹理球,其中两种纹理训练时没见过。
传感器
- Rhoda 称,装在夹爪上的版本对羽毛(数毫牛)和哑铃(超过 40 牛)都有响应,重载之后仍能感到羽毛。它测试的现成光学和磁性传感器对同一根羽毛没有明显响应。
- 它报告法向力和剪切力、约 500 Hz 采样的接触振动,以及温度;温度演示是温水和冰块,色标固定在 20–40 °C。
- 同样的传感器被装进手持 Universal Manipulation Interface,人类示范因此同时记录接触力、画面和动作,成为模仿学习的原料。
蒙住眼睛的任务
模型读取一段触觉“视频”历史,预测下一步触觉信号,再由逆动力学模型把预测变成动作。腕部和头部摄像头被遮住。机器人必须在箱子里搜索,靠接触区分纹理球和光滑球,并在接触后调整抓握。
训练只用一颗光滑蓝球和一颗绿色纹理球。同一模型随后面对四颗光滑球和三颗纹理球。其中两颗纹理球在直径、软硬和表面纹理上与训练球不同。Rhoda 称模型仍然识别并取出了纹理球,并展示了一段延长的自主运行。它没有公布试验次数或成功率。Humanoids Daily 指出,视频里有拿错球和重新扫描,部分片段加速到 6 倍和 12 倍。
为什么重要
夹爪挡住接触点时,视觉就失效了。Rhoda 把触觉当成另一路视频,放进原本用来预测像素的模型里,用于摄像头看不见时仍要动作的具身智能。演示是一箱受控的球,不是工厂料箱。重复试验下的可靠性,Rhoda 没有公布。
来源 已核对来源
相关解读
更多 灵巧手与硬件 →波士顿动力为 Atlas 换上为量产设计的四指手
Atlas 新手 13 个自由度、没有小指、关节直驱,专为仿真到现实训练设计;同时现代在佐治亚开始训练 Atlas,Rohit Prasad 出任 CEO。
大寰机器人发布 13 自由度直驱五指灵巧手,传感器可快换
735 克的 ADH-5-13 拥有 13 个主动自由度、指尖触觉、±0.2 mm 重复精度,模块无需拆整只手即可更换。
Sharpa 在 IROS 发布三件套:全身电子皮肤机器人、21 自由度触觉灵巧手和力反馈数据手套
Sharpa 发布 D01(全身覆盖电子皮肤的灵巧操作机器人)、W02(比上一代小约 30%、21 个主动自由度的灵巧手)和 AE01(22 个编码器的力反馈遥操作数据手套)。
Newsletter
Robrief 周报
每周一封,只讲重要的机器人新闻。免费,可随时退订。