挑战WorldLabs:Visionary,一个全面超越Marble底层渲染器的WebGPU渲染平台
机器之心·2025-12-21 04:21
该工作由上海人工智能实验室钟志航团队联合四川大学、东京大学、上海交通大学、西北工业大学共同完成。 在李飞飞团队 WorldLabs 推出 Marble、引爆「世界模型(World Model)」热潮之后,一个现实问题逐渐浮出水面: 世界模型的可视化与交互,依然严 重受限于底层 Web 端渲染能力。 Marble 所依赖的 基于 WebGL 的 3D Gaussian Splatting (3DGS) 渲染器 SparkJS,让世界模型首次在浏览器中「跑起来」,但也暴露出明显瓶颈:大场 景以及复杂场景下,CPU 排序成为性能天花板,动态场景与生成模型难以接入。 相比 Genie3 等视频生成范式的世界模型,其对算力的依赖极为庞大,距离在 Web 端实现高质量、实时运行仍有不小差距。反观神经渲染路线,尤其是 3D Gaussian Splatting ,凭借其高效性,已经成为构建世界模型的重要表示形式。 3DGS 让高质量、实时的 3D 世界成为可能,但在实际落地中,仍存在明显断层: 近日,开源项目 Visionary 给出了一个截然不同的答案: 基于 WebGPU 与 ONNX,在浏览器中实现真正的动态 3DG ...