手把手教学机器人学习方法
Search documents
灵巧手能帮女友拧瓶盖了!同济清华上海交大等新成果 | CoRL 2025
量子位· 2025-10-11 04:09
Corl 2025 投稿 量子位 | 公众号 QbitAI 灵巧手技能+1,能帮女友拧瓶盖了! 不仅如此,还能帮忙挤牙膏、插充电器。 结果让 星动纪元灵巧手星动XHAND 1 成功解锁了各种复杂精细操作。 在瓶盖旋紧、牙膏挤压、注射器按压等九项复杂任务中,KineDex平均成功率达74.4%,且数据采集效率相较于遥操提升两倍以上。 该论文已被CoRL 2025接收。 真·手把手引导灵巧操作学习 当前,机器人学习精细操作(尤其那种需要精确力度控制的任务)的难点在于缺乏高质量的"示范数据"。 以往的主流方式有两种,一种是遥操,一种是视频学习。前者的操作者缺乏真实"手感",效率低容易失败;后者通过看人类视频模仿学习,但 人与灵巧手之间存在差异,动作不匹配,且同样没有触觉信息。 来自同济大学、清华、上海交大、香港大学等研究团队提出面向灵巧操作任务的示教与策略学习新方法KineDex框架—— 真·手把手指导的方式,让人类动作直接传递到灵巧手,并同步采集高保真触觉信息。 接下来,处理数据。系统采集到的数据没有办法直接用于视觉运动策略学习,因为摄像头肯定会拍到操作者的手,这会干扰机器人的学习,而 之后它自己操作时是没有人手 ...