Explainable Robotics Benchmark是可解释机器人研究社区维护的标准化评测基准,用于公平比较不同可解释方法在各类机器人任务中的性能。基准涵盖基于模型、基于规则、基于可视化、基于事后解释、基于内在可解释等多种可解释方法,以及感知、规划、控制、决策、人机交互等多种机器人任务。基准提供了统一的数据集、标准化的评估协议、可复现的实验设置和公开的排行榜,支持多种机器人平台和模型架构。
Explainable Robotics Benchmark
Explainable Robotics Benchmark是可解释机器人研究社区维护的标准化评测基准,用于公平比较不同可解释方法在各类机器人任务中的性能。基准涵盖基于模型、基于规则、基于可视化、基于事后解释、基于内在可解释等多种可解释方法,以及感知、规划、控制、决策、人机交互等多种机器人任务。基准提供了统一的数据集、标准化的评估协议、可复现的实验设置和公开的排行榜,支持多种机器人平台和模型架构。
测试方法与条件
在统一的数据集和任务设置下运行各可解释方法,记录解释保真度、解释复杂度、人类理解度等指标,多次运行取平均值和标准差