具身智能“高考”难疯了,人类100分,最强模型12.8
通用机器人这座山,到底有多高?
过去一年,VLA、机器人基础模型、世界模型这些概念轮番登场。各家放出的demo也越来越丝滑:叠碗、插管、收纳、倒水、整理桌面,看起来机器人终于开始能听懂人话、理解世界、动手干活了。
但问题也随之而来:这些模型到底谁更强?强在哪个环节?能不能从仿真走到真实世界?我们离真正的通用操作机器人,到底还有多远?
现在,一份新的“登山路线图”来了。曾推出
RoboTwin
RoboDojo
它不只是一个新benchmark,更像是在具身智能领域立了一座“珠峰”。
42个仿真任务,18个真实机器人任务,30个主流机器人策略同台竞技。覆盖面从泛化、记忆、精细操作、长程执行,一直到开放语义理解。
结果很直接,甚至有些残酷:
当前最强的通用机器人策略,在仿真环境里的平均成功率只有
。到了真实世界,最好模型的表现也不过是8.80%
的平均成功率。12.8%
而人类专家呢?仿真环境里是76.03%,真实世界则是
100%
机器人基础模型们看似已经起步,开始攀登这座具身珠峰,但RoboDojo的榜单揭示了一个现实:它们大多还在山脚下适应高反。
先看任务设计:这座山为什么难?
先看任务设计:这座山为什么难?
RoboDojo的难点,不在于简单地堆砌任务数量,而在于它把机器人操作能力拆解成了一组更接近真实世界的“登山关卡”。

在仿真环境中,RoboDojo设计了42个任务,围绕五个核心能力展开:
Generalization(泛化)
Memory(记忆)
Precision(精细操作)
Long-Horizon(长程)
Open(开放语义)

这些任务可不是简单的“拿起-放下”变体。拿
泛化任务
记忆任务
精细操作
长程任务则更贴近真实家务场景:机器人不是只做一个动作,而是要连续完成多个子步骤。拿起、移动、交接、对齐、放置,每一步都可能引入误差,而这些误差会一路累积到最后。
但RoboDojo没有止步于仿真。真正让这座“具身珠峰”变高的,是它把评测搬到了
真实机器人

RoboDojo设计了18个真实世界任务,覆盖ARX X5、Piper、Piper X这三种双臂机器人平台,每个平台各6个任务。这些任务并非仿真任务的一一复刻,而是专门用来考察机器人在真实物理世界中的部署能力。
比如,ARX X5上有盖积木、做面包、制作食物、装水果并倒出、保险箱收纳、插管等任务;Piper上有堆叠并盖住积木、填笔筒、把物体放进篮子、插充电器、叠碗、扶正瓶子等任务;Piper X上则包括物体分类、拆乐高、挂杯子、把物品装进背包、清扫积木、盖笔帽等任务。听起来都很日常,但对机器人来说,一点也不简单。
原因在于,真实世界里每一步都充满了物理不确定性:物体可能滑动,夹爪可能没夹稳,机械臂可能有微小延迟,相机可能有噪声,接触瞬间还可能把目标推偏。
更重要的是,RoboDojo-RealEval对真机评测做了标准化处理:
统一硬件配置、工作空间布局、光照条件、场景复位流程、评测协议和部署接口。

换句话说,RoboDojo在真机部分不是“拍拍demo视频了事”,而是把真实机器人操作变成了一套
可复现、可比较、可远程接入的标准化考试
这才是“具身珠峰”的真正含义——不是单点能力登顶,而是
仿真诊断和真实部署两条路线都不能掉链子
榜单一出,差距摆上桌面
榜单一出,差距摆上桌面
RoboDojo最核心的部分,就是它的公开排行榜。这也是它区别于很多“自家模型自家测”的评测的关键。
RoboDojo由
全学术机构联盟
没有商业模型方的利益绑定
公益性组织AI MMLab Club基金会
面向整个社区开放的公共登山路线
在仿真榜单中,团队集成并评测了30个代表性的机器人操作策略,包括Hy-Embodied-0.5-VLA、Spatial Forcing、π0.5、X-VLA、GR00T-N1.7、π0、OpenVLA-OFT等。

榜单排名第一的是Hy-Embodied-0.5-VLA,平均分13.07,平均成功率8.80%。紧随其后的是Spatial Forcing、π0.5、X-VLA等模型,但整体表现依然处在很低的区间。
即便是领先的模型,在五大能力维度上也没有一个能称得上“全能”。有的模型泛化更强,有的精细操作更稳,有的长程任务能多推进几步,但一旦拉到完整榜单上看,短板就非常明显。
RoboDojo揭示了一个关键事实:今天的机器人模型不是不会动,而是
不够稳
很难稳定地完成任务
在物理世界里,差一点就是失败。
真实世界榜单更扎心
真实世界榜单更扎心
如果仿真还算是“训练场”,那真实机器人就是“珠峰的实地”。在真实世界榜单里,表现最好的模型是π0.5,总体成功率12.8%,平均分22.9。

头部梯队包括InternVLA-A1、GalaxeaVLA、Xiaomi-Robotics-0、X-VLA等,但整体成功率依然停留在个位数到十几个百分点。这揭示了一个非常关键的问题:
仿真里表现相对靠前,不代表在真实世界里就一定稳。
真实机器人会引入额外的困难:相机噪声、标定误差、机械臂延迟、接触不稳定、动作抖动、安全边界、物体初始位置的微小偏差。这些东西在demo视频里常常看不见,但在标准化评测中会集中暴露。RoboDojo的意义也正在于此——它不只问“机器人有没有做成功”,而是在问:
这个策略,能否在仿真中通过全面性考察,同时在现实世界中直面挑战?
为什么说这是“具身珠峰”
为什么说这是“具身珠峰”

从结果来看,RoboDojo暴露了一个很现实的判断:当前机器人基础模型的能力增长并不均衡。有些模型能更好地识别目标,有些模型能更顺畅地执行动作,有些模型在长程任务中能推进更多步骤。但
真正的通用机器人,不能只在某一个能力维度上强。
它既要看得懂,也要记得住;既要规划对,也要手上准;既要能处理熟悉任务,也要能理解开放指令;既要在仿真里跑通,也要在真实机械臂上稳定执行。而RoboDojo的实验结果显示,今天的模型在这些维度上仍然存在明显的短板。
最典型的是Open任务。即使是最强的模型,在开放语义任务上的成功率也仅有约
1.67%
真正“听懂人话并可靠干活”
这正是具身珠峰的难度所在——不是单点能力登顶,而是所有能力都不能掉链子。
不只是评测,还是一套基础设施
不只是评测,还是一套基础设施
RoboDojo还有两个重要的组成部分。
一个是
异构并行仿真
另一个是
XPolicyLab

XPolicyLab
对研究者来说,这意味着模型可以
“一次接入,多处评测”
也因此,RoboDojo不只是论文里的一个静态benchmark,而是一个
可持续更新的具身智能竞技场
对于机器人基础模型领域来说,这一点很重要。因为在通往通用操作机器人的路上,大家不仅需要更大的模型、更酷的demo,也需要一套能反复衡量进步的“海拔尺”。
具身智能,终于有了更高的山
具身智能,终于有了更高的山

过去,机器人领域常常被demo驱动。一个模型能完成几个漂亮任务,很容易让人产生“通用机器人快来了”的错觉。但RoboDojo给出的结论更为冷静:
当前模型确实在进步,但距离可靠、泛化、可部署的通用机器人操作,还差得很远。
这其实并不是一个坏消息。恰恰相反,RoboDojo把问题摆清楚了:谁能泛化,谁会遗忘,谁动作抖,谁只会做一半,谁在真实世界掉队,谁能在榜单上往上爬。具身智能,终于不再是比拼宣传片,而是开始比拼标准化赛道上的真实成绩。
这座“具身珠峰”已经立起来了。接下来,就看谁先登顶了。
项目负责人介绍
项目负责人介绍

陈天行

陈越
未来扩展
未来扩展
RoboDojo团队后续还会持续输出灵巧操作、移动操作、触觉操作、人形全身操作等评测内容,值得持续关注。
