AI Day直播 | WorldSplat：用于自动驾驶的高斯中心前馈4D场景生成

点击下方 卡片 ，关注" 自动驾驶之心 "公众号 戳我-> 领取 自动驾驶近30个 方向 学习 路线 >>直播和内容获取转到 → 自动驾驶之心知识星球 点击按钮预约直播 与之相对，近期的 3D/4D 重建类方法虽大幅改进了真实驾驶场景的新视角合成效果，却本质上缺乏生成能力。为破解场 景生成与重建之间的这一困境，南开大学等研究团队提出了 WorldSplat—— 一 种全新的前馈式 4D 驾驶场景生成框架 。 该方法通过两个关键步骤，高效生成具备一致性的多轨迹视频：（1） 引入融合多模态信息的 4D 感知潜在扩散模型，以 前馈方式生成像素对齐的 4D 高斯分布 ；（2） 利用增强型视频扩散模型，对基于这些高斯分布渲染出的新视角视频进行 优化。 在基准数据集上开展的大量实验表明，WorldSplat 能够有效生成高保真、时空一致的多轨迹新视角驾驶视频。 本次自动驾驶之心为大家邀请到WorldSplat 第一作者 南开大学博士生朱子悦 为大家详细分析本篇工作。 论文标题 ： WorldSplat: Gaussian-Centric Feed-Forward 4D Scene Generation for Auton ...