具身智能评测基准
收录 26 个具身智能评测基准,涵盖发布机构、开放程度、开源协议与适配机器人。
dm_control
Google DeepMind英国
Google DeepMind 基于 MuJoCo 物理引擎的仿真与强化学习软件栈。核心组件包括 MuJoCo 的 Python 绑定、DeepMind Control Suite…
RoboTwin
香港大学、上海交通大学中国香港
面向双臂操作的仿真评测基准与数据生成平台,当前版本为 RoboTwin 2.0。平台提供 50 个双臂操作任务和多种机械臂本体,内置自动化数据采集和强域随机化,可批量生成训练数据,…
LIBERO
The University of Texas at Austin美国
面向终身学习和多任务机器人操作的仿真评测基准,用于研究知识迁移。提供程序化生成任务的流水线,以及 LIBERO-Spatial、LIBERO-Object、LIBERO-Goal、…
RoboVerse
UC Berkeley、北京大学 等美国
统一多种仿真器的机器人学习平台、数据集与评测基准。核心 MetaSim 抽象出统一的场景、任务和机器人配置,可在 Isaac Lab、Isaac Gym、MuJoCo、SAPIEN…
Gymnasium-Robotics
Farama Foundation美国
Farama 基金会维护的机器人强化学习环境集合,采用 Gymnasium API,基于 MuJoCo 物理引擎和官方 Python 绑定运行。包含 Fetch 机械臂操作、Sha…
Meta-World
Farama Foundation、Stanford University 等美国
面向多任务和元强化学习的机器人操作仿真评测基准,基于 MuJoCo,提供 50 个连续控制操作任务。多任务基准 MT1、MT10、MT50 要求同时学习 1、10 或 50 个任务…
RLBench
Imperial College London英国
大规模视觉引导机器人操作评测基准与学习环境,基于 CoppeliaSim 和 PyRep 构建,提供从简单抓取到开烤箱等多步骤任务在内的 100 个任务,可自动生成示范数据。支持少…
RoboCasa
The University of Texas at Austin、NVIDIA美国
面向通用机器人日常任务的大规模仿真框架与评测基准,基于 robosuite,以厨房场景为主。最新版 RoboCasa365 借助大语言模型设计任务,提供大量厨房场景和物体资产(含 …
BEHAVIOR-1K
Stanford University美国
斯坦福大学发布的具身智能家务任务评测基准,包含 1000 种日常家庭活动,如清洁、烹饪、整理,活动选自真实的人类时间使用调查和偏好研究。该一体化仓库提供训练与评测智能体所需的全部组…
LocoMuJoCo
Technische Universität Darmstadt德国
面向全身控制的模仿学习基准,基于 MuJoCo,并支持 MJX / MjWarp 后端做 GPU 并行仿真。包含人形机器人、四足机器人和肌肉骨骼人体模型等环境,为每个人形机器人提供…
SimplerEnv
UC San Diego、Stanford University 等美国
用仿真评测真实机器人操作策略的基准,复现 Google Robot 和 WidowX + Bridge 等常见真机设置,用于评测 RT-1、RT-1-X、Octo 等通用策略。基于…
Bi-DexHands
北京大学中国
北京大学 PKU-MARL 团队发布的双灵巧手操作强化学习基准,基于 NVIDIA Isaac Gym,可在单张 GPU 上并行运行数千个环境。提供交接、抛接、抬起、放置等多种双手…
1X World Model Challenge
1X Technologies美国
1X Technologies 发起的机器人世界模型挑战赛,任务是根据历史画面预测人形机器人 EVE 的第一视角未来画面,分压缩、采样和评估三个赛道,最终目标是在学到的世界模型里评…
CALVIN
University of Freiburg德国
弗莱堡大学发布的语言条件长程机器人操作仿真基准(Composing Actions from Language and Vision),基于 PyBullet。智能体仅依靠机载传感…
VLN-CE
Oregon State University、Georgia Institute of Technology 等美国
连续环境中的视觉语言导航基准,基于 Habitat 平台和 Matterport3D 场景重建。智能体按众包的自然语言指令在真实感三维环境中自由移动,不受预设导航图限制。支持 Ro…
CaP-X
NVIDIA、UC Berkeley 等美国
NVIDIA、UC Berkeley、斯坦福和 CMU 推出的「代码即策略」机器人操作智能体研究框架。CaP-Gym 让智能体生成调用感知与控制原语的 Python 代码来操控机器…
HumanoidBench
UC Berkeley美国
人形机器人全身移动与操作的仿真评测基准,基于 MuJoCo,使用配备双灵巧手的 Unitree H1 模型,提供行走、跑步、跨栏、爬楼梯等移动任务,以及开门、开柜、搬箱子、投篮、插…
RealMirror
中兴通讯中国
中兴通讯开源的人形机器人 VLA 研究平台,基于 Isaac Sim 打通低成本遥操作数据采集、模型训练、推理与评测,无需真机即可开展端到端 VLA 研究。平台提供人形机器人 VL…
RoboDojo
AI MMLab Club
统一仿真与真机评测的通用机器人操作策略基准,包含基于 Isaac Sim 的 42 个仿真任务和 18 个真机任务,覆盖 3 种机器人,从泛化、记忆、精度、长程和开放性五个能力维度…
RoboPianist
Google DeepMind、UC Berkeley英国
基于 MuJoCo 的高维灵巧控制评测基准,任务是让一对仿真拟人机器人手弹钢琴,考察高时空精度、双手协调和频繁接触下的规划能力,手部模型取自 MuJoCo Menagerie。提供…
Inspect Robots
Robocurve美国
Robocurve 推出的物理 AI 开源评测框架:评测任务定义一次后,可让任意策略(VLA,或通过工具调用控制机器人的大语言模型智能体)在任意兼容本体(真实机械臂、人形或 Isa…
vla-evaluation-harness
Allen Institute for AI美国
Allen Institute for AI(Ai2)开源的 VLA 统一评测框架,把模型服务与仿真基准解耦,用一套配置在 LIBERO、SimplerEnv、CALVIN、Rob…
RoboHive
Meta AI美国
基于 MuJoCo 的统一机器人学习框架,以 OpenAI Gym 接口提供环境与任务集合,兼容 Stable Baselines、RLlib、TorchRL 等训练框架。环境按套…
Isaac Lab-Arena
NVIDIA、Lightwheel美国
NVIDIA 在 Isaac Lab 之上开发的基准构建与策略评测框架,把场景、机器人本体和任务拆成独立组件组合成环境,支持关系式物体摆放、技能串联成长程任务和可控扰动;可在 GP…
RoboLab
NVIDIA美国
NVIDIA 基于 Isaac Lab 构建的机器人操作策略评测基准,首批 RoboLab-120 包含 120 个新任务,涵盖抓放、堆叠、重排和工具使用等,每个任务带语言指令,并…
ALFRED
University of Washington、Allen Institute for AI 等美国
面向家务任务的具身指令跟随评测基准:智能体根据自然语言目标和分步指令,结合第一视角画面,在 AI2-THOR 2.1.0 的交互式家居场景中输出导航和物体交互动作序列,任务包含长程…
