天气 
2025-08-16
IT之家 8 月 16 日消息，研究机构 Ai2 现已在 GitHub 开源了旗下 MolmoAct 机器人“行动推理模型”（Action Reasoning Model，ARM）模型，该模型主要运用于具身机器人场景，号称可以解决机器人在三维空间中的动作规划与理解问题。
据介绍，与传统仅依赖文字描述推导动作的视觉语言行动模型（VLA）不同，MolmoAct 旨在克服语言难以完整表达三维环境深度和距离关系的不足。因此 MolmoAct 在第一阶段会首先生成由 VQVAE 预训练得到的空间感知 Token，相应 Token 同时包含几何结构与位置信息，可用于评估物体间的距离，并为后续规划提供基础。
而在第二阶段，模型会在图像空间中生成一系列路径点，作为任务的中间目标，直观展示动作展开的顺序。第三阶段，路径点会被转化为机器人末端执行器或机械爪的低层马达指令，并根据机器人运动学配置进行动作解码。
研究团队指出，在名为 SimplerEnv 的模拟测试环境中，MolmoAct-7B 在训练集未见过的任务中达到了 72.1% 的成功率，优于 Physical Intelligence、谷歌、微软和英伟达等实验室的对照模型。在 LIBERO 模拟平台的多任务与终身学习测试中，经过高效参数微调，平均成功率提升至 86.6%。同时，相比业界 AI 机器人大模型，MolmoAct 的训练成本更低：预训练仅使用了 2630 万样本和 256 颗 H100 GPU，大约 1 天即可完成；微调则只需 64 颗 H100，约 2 小时即可完成。
此外，为降低机器人操作风险并提升可解释性，MolmoAct 在执行动作前会将内部规划的运动轨迹叠加到输入图像上，用户可以直接查看并修正动作方案。同时，用户还可以通过平板等设备使用手绘方式标注目标姿态或路径，模型会即时整合这些标注进行一系列调整。
目前，Ai2 已在 GitHub 同步开源了 MolmoAct-7B 的完整资源（https://github.com/allenai/MolmoAct），官方强调，这些资源与工具可以帮助其他研究团队在不同机器人平台和任务中充分验证与优化。
广告声明：文内含有的对外跳转链接（包括不限于超链接、二维码、口令等形式），用于传递更多信息，节省甄选时间，结果仅供参考，IT之家所有文章均包含本声明。
来源于：https://www.ithome.com/0/875/828.htm 如有侵权请联系我们
猜你喜欢
2025-08-17
《代号：深渊之歌》首曝PV！从零开始搭建...
当萌系二次元邂逅硬核生存建造，一场前所未有的奇幻冒险即将启程！今日，由上海淘气泡互联网技术有限公司发行的创新手游《代号：深渊之歌》正式...
READ MORE
2025-08-16
E句话 | 他被曝婚内出轨？
E句话看天下 E姐&主播板栗为您打造的世界奇妙物语。 我们的宗旨是： 来不及了，快上车！ E姐看综艺 陈楚生拿下《歌手》歌王 你满意这个结果吗？ 曝夏克立婚内出...
READ MORE
2025-08-16
赵露思开撕虞书欣？杨幂锁定视后拿奖？岳云...
1：杨幂锁定视后拿奖？ 杨幂主演的新剧热度不错，现在也有粉丝还有网友夸杨幂演技好、剧爆了，不仅扛住了年代剧，也是成功转型。说她今年打了漂亮的翻身仗。之前还因作品...
READ MORE
2025-08-16
郑某峰被批捕，猥亵女童，存大尺度视频，1...
近日，演员郑某峰因涉嫌猥亵儿童，被正式批捕。 可能大家对这人不熟悉，但这张脸，绝对不陌生。 他是星爷《美人鱼》中的“郑总”，没事就爱乱“喷”，油腻又嚣张。 原本...
READ MORE最新发布
-
《代号：深渊之歌》首曝PV！从零开始搭建你的异世界营地
综合新闻, 2025-08-17 -
感动中国2024年度人物揭晓，郑钦文、庞众望等入选
综合新闻, 2025-08-16 -
E句话 | 他被曝婚内出轨？
综合新闻, 2025-08-16 -
赵露思开撕虞书欣？杨幂锁定视后拿奖？岳云鹏拒绝潜规则？霍建华...
综合新闻, 2025-08-16 -
郑某峰被批捕，猥亵女童，存大尺度视频，16岁女演员：嫌我年龄...
综合新闻, 2025-08-16
