HomeRobot OVMM(Open-Vocabulary Mobile Manipulation)是卡内基梅隆大学等机构推出的开放词汇移动操作基准测试,旨在评估机器人在真实家庭环境中根据自然语言指令完成导航和操作任务的能力。该基准提供了标准化的仿真和真实实验设置,涵盖厨房、客厅等多个家庭场景,要求机器人在未知环境中根据开放词汇指令完成物体查找和摆放任务。HomeRobot OVMM已成为评估通用移动操作能力的标准基准之一,推动了VLA模型在长程家庭任务中的性能提升。
HomeRobot OVMM: Open-Vocabulary Mobile Manipulation Benchmark
HomeRobot OVMM(Open-Vocabulary Mobile Manipulation)是卡内基梅隆大学等机构推出的开放词汇移动操作基准测试,旨在评估机器人在真实家庭环境中根据自然语言指令完成导航和操作任务的能力。该基准提供了标准化的仿真和真实实验设置,涵盖厨房、客厅等多个家庭场景,要求机器人在未知环境中根据开放词汇指令完成物体查找和摆放任务。HomeRobot OVMM已成为评估通用移动操作能力的标准基准之一,推动了VLA模型在长程家庭任务中的性能提升。
关键指标
任务成功率
SPL导航指标
操作完成率
平均完成步数
测试方法与条件
在标准化仿真和真实家庭环境中,机器人根据自然语言指令完成开放词汇导航和物体操作任务,评估任务完成率和路径效率。