仅看视频就能copy人类动作，宇树G1分分钟掌握100+，UC伯克利提出机器人训练新方式

克雷西 发自 凹非寺 量子位 | 公众号 QbitAI UC伯克利团队研发出了一套新的机器人训练系统，可将视频动作迁移到真实机器人。 这个名为 VideoMimic 的新系统，已经让宇树G1机器人成功模仿了100多段人类动作。 VideoMimic的核心原理是从视频当中提取姿态和点云数据，然后在模拟环境中训练并最终迁移到实体机器人。 这项成果引起了网友们的一片哇声，还有人联想到了《加勒比海盗》中的杰克·斯帕罗，表示简直就像装上了一个Jack的API一样。 适应各种地形，还会爬台阶 为了训练机器人策略，研究团队收集了一个包含123个视频片段的数据集。 这些视频由手持设备在日常环境中拍摄，涵盖了不同的人体运动技能和场景。 在VideoMimic的训练下，宇树Go1已经学会了适应各种地形： 不用动作捕捉， 只用一段视频就能教会机器人学会人类动作 ，效果be like： 学会了跨越路肩： 而且学会了爬台阶，过程中还表演出了花式走位： 既然会上，当然也就能下： 并且在下楼梯的过程中，作者发现即使机器人的脚底发生较大滑动，训练得到的策略也能够快速做出反应并恢复平衡，从而避免跌倒。 除了以上各种行进动作之外，也会站起和坐下 ...