凤凰网科技讯12月16日，字节跳动发布新一代音视频生成模型Seedance1.5pro。该模型支持从文本或图 像生成带有同步音频的视频，实现了音视频的联合生成。 技术层面，该模型采用了基于MMDiT架构的音视频联合生成框架，并通过多阶段数据链路与强化学习 方式进行优化。团队表示，其已在影视创作、广告制作、短剧及游戏内容等场景中进行测试，生成内容 在指令遵循、音质表现等方面有所提升，但在复杂运动的物理稳定性、多角色对话等方面仍有改进空 间。 据介绍，Seedance1.5pro在音画同步方面进行了优化，旨在提升生成内容中口型、语调与表演节奏的一 致性。模型支持包括中文、英文、日文在内的多语种，并可模拟四川话、粤语等方言的语音特征。在视 频层面，该模型声称具备一定的自主运镜调度能力，可生成如长镜头跟随、希区柯克式变焦等效果，以 增强画面的动态张力与叙事感。 ...