Workflow
机器人训练
icon
Search documents
仅看视频就能copy人类动作,宇树G1分分钟掌握100+,UC伯克利提出机器人训练新方式
量子位· 2025-05-08 04:04
克雷西 发自 凹非寺 量子位 | 公众号 QbitAI UC伯克利团队研发出了一套新的机器人训练系统,可将视频动作迁移到真实机器人。 这个名为 VideoMimic 的新系统,已经让宇树G1机器人成功模仿了100多段人类动作。 VideoMimic的核心原理是从视频当中提取姿态和点云数据,然后在模拟环境中训练并最终迁移到实体机器人。 这项成果引起了网友们的一片哇声,还有人联想到了《加勒比海盗》中的杰克·斯帕罗,表示简直就像装上了一个Jack的API一样。 适应各种地形,还会爬台阶 为了训练机器人策略,研究团队收集了一个包含123个视频片段的数据集。 这些视频由手持设备在日常环境中拍摄,涵盖了不同的人体运动技能和场景。 在VideoMimic的训练下,宇树Go1已经学会了适应各种地形: 不用动作捕捉, 只用一段视频就能教会机器人学会人类动作 ,效果be like: 学会了跨越路肩: 而且学会了爬台阶,过程中还表演出了花式走位: 既然会上,当然也就能下: 并且在下楼梯的过程中,作者发现即使机器人的脚底发生较大滑动,训练得到的策略也能够快速做出反应并恢复平衡,从而避免跌倒。 除了以上各种行进动作之外,也会站起和坐下 ...
谷歌DeepMind CEO展示Genie 2:机器人训练新时代
Sou Hu Cai Jing· 2025-04-22 02:24
机器人前瞻(公众号:robot_pro) 编译 | 江宇 Vertime ▲实机演示:Genie 2将加州瀑布顶部的照片转化为类似视频游戏场景 Hassabis表示,Genie 2的"世界模型"能够动态生成环境,模拟现实世界的物理特性。这种能力使其不仅适用于娱乐领域(如生成游戏和视频),更重要的是 为AI和机器人提供高效的训练平台。 Hassabis强调,Genie 2的核心目标是构建理解现实世界的模型,为机器人训练提供低成本、高效率的解决方案。传统的机器人数据采集受限于现实世界的复 杂性和高成本,数据量有限且收集速度慢。 而Genie 2的模拟环境可以生成近乎无限的数据量,允许机器人在虚拟世界中进行初步学习,随后通过少量现实世界数据进行微调。 编辑 | 漠影 机器人前瞻4月21日消息,谷歌DeepMind迎来突破性进展,其世界构建AI模型Genie 2展现了在机器人训练领域的巨大潜力。 DeepMind CEO兼联合创始人Demis Hassabis向《60分钟》节目展示了这一创新技术,强调其在创建可交互3D环境及加速机器人学习方面的应用前景。 Genie 2能够从单一静态图像生成可探索的3D虚拟世界,为A ...