Multi-Teacher Distillation for Robotics: A Review

Multi-Teacher Distillation for Robotics: A Review是一篇系统综述多教师蒸馏在机器人领域应用的论文，涵盖基于教师集成的多教师蒸馏、基于教师选择的多教师蒸馏、基于教师加权的多教师蒸馏、基于教师专业化的多教师蒸馏、基于教师协作的多教师蒸馏等多种多教师蒸馏方法。论文分析了多教师蒸馏在机器人操作、导航、运动控制、多任务学习等场景中的应用效果，对比了不同多教师蒸馏方法的样本效率、渐近性能、计算复杂度，讨论了教师多样性、教师冲突、学生容量等关键问题。该论文适用于机器人研究者和工程师，帮助理解如何利用多教师蒸馏提升机器人学习性能，来源机构为国际机器人学习研究社区。