让机器人更像人类有了新方法!港科大新算法对齐人机动作形态,无需重复训练,轻量模块通用且适配

基于大规模人类视频数据的视觉预训练在开发机器人操作算法方面展示了潜力。然而,人-机器人动作之间的数据域差异是实现有效迁移的关键障碍。香港科技大学团队提出HR-Align新范式,利用人类与机器人的动作对来弥合这一差距,从而提高从预训练模型中学习到的视觉系统在实际机器人任务中的性能。