ADAS新范式！北理&清华MMTL-UniAD：多模态和多任务学习统一SOTA框架（CVPR'25）

点击下方 卡片 ，关注" 自动驾驶之心 "公众号 戳我-> 领取 自动驾驶近15个 方向 学习 路线 今天自动驾驶之心为大家分享 北理工&清华 最新的工作！ MMTL-UniAD：辅助 驾驶感知中多模态和多任务学习的统一框架（CVPR'25）。 如果您有相关工作需 要分享，请在文末联系我们！ 自动驾驶课程学习与技术交流群事宜，也欢迎添加小助理微信AIDriver004做进一 步咨询 >>点击进入→ 自动驾驶之心 『多任务学习』技术交流群 论文作者 | Wenzhuo Liu等 高级驾驶辅助系统需要对驾驶员的心理/生理状态以及交通环境进行全面感知，但现有研究往往忽视了这 些任务之间联合学习所带来的潜在优势。本文提出了一种统一的多模态多任务学习框架——MMTL- UniAD，该框架可同时识别驾驶员行为（如四处张望、交谈）、驾驶员情绪（如焦虑、愉快）、车辆行 为（如变道、转向）以及交通环境（如拥堵、通畅）。本研究的关键挑战在于如何缓解多任务联合学习 过程中产生的负迁移现象。该现象是多任务学习中核心难点，指由于任务间存在差异或冲突，导致某些 任务在联合训练下的性能反而低于其单独训练时的表现。为解决这一问题，我们在框架 ...