做自动驾驶VLA的这一年

点击下方 卡片 ，关注" 自动驾驶之心 "公众号 戳我-> 领取 自动驾驶近30个 方向 学习 路线 最近和星球一位嘉宾大佬交流了下，聊了他做一年VLA的心得，分享给大家。 一辆搭载 VLA 模型的自动驾驶车辆，它 不仅能自己开车，还能解释自己为什么这么开，甚至能听懂人类的指 令 。"解释自己为什么这么开"，其实就是 text language , 它生成了描述当前场景的便于人类理解的文本 信息。"理解人类指令"就会涉及到 verbal language 和 action in language 。比如司机对它说 "前 面有点窄，请小心点过" ，前半句其实就是 verbal language ，人类提供了一个场景描述，模型需要理解 人类的语言，而后半句也是人类提供的一个 action 指令 ，辅助模型去生成正确且有效的 action。最后模 型 decode 出一个合理的轨迹或者说 action，即为最终的 output action 。 文章完整版链接： 做自动驾驶VLA的这一年 ， 更多自动驾驶VLA的前沿技术，欢迎加入星球和嘉宾交流！ 为什么会出现 VLA? 在自动驾驶的发展史上，其实一路走来可以分为 ...