World Models Benchmark for Robotics是机器人世界模型研究社区维护的标准化评测基准,用于公平比较不同世界模型在各类机器人任务上的预测精度、规划性能和样本效率。基准涵盖基于模型的强化学习(Dyna/PETS/MBPO)、潜空间世界模型(Dreamer/PlaNet)、基于Transformer的世界模型、基于扩散模型的世界模型等多种世界模型范式,包括机器人操作、运动控制、导航、自动驾驶、游戏AI等多种任务类型。基准提供了统一的环境接口、标准化的评估协议、可复现的实验设置和公开的排行榜,支持多种仿真环境(OpenAI Gym、MuJoCo、PyBullet、DeepMind Control Suite、Atari等)。
World Models Benchmark for Robotics
World Models Benchmark for Robotics是机器人世界模型研究社区维护的标准化评测基准,用于公平比较不同世界模型在各类机器人任务上的预测精度、规划性能和样本效率。基准涵盖基于模型的强化学习(Dyna/PETS/MBPO)、潜空间世界模型(Dreamer/PlaNet)、基于Transformer的世界模型、基于扩散模型的世界模型等多种世界模型范式,包括机器人操作、运动控制、导航、自动驾驶、游戏AI等多种任务类型。基准提供了统一的环境接口、标准化的评估协议、可复现的实验设置和公开的排行榜,支持多种仿真环境(OpenAI Gym、MuJoCo、PyBullet、DeepMind Control Suite、Atari等)。
测试方法与条件
在统一环境和训练预算下运行各世界模型方法,记录预测精度、规划成功率、样本效率、最终性能等指标,多次运行取平均值和标准差