AI导读:

字节发布新一代AI视频创作模型Seedance 2.0,支持多种模态输入和编辑能力,能合成复杂交互场景,降低制作成本,缩短生产周期,适配商业广告、影视特效等应用场景。

两年前的春节,美国AI公司OpenAI旗下AI视频生成模型Sora横空出世。如今,中国科技巨头在这一领域吸引了全球范围内的关注。2月12日,字节跳动Seed团队对外正式发布新一代视频创作模型Seedance 2.0,并已上线即梦AI、豆包等平台。据介绍,Seedance 2.0采用统一的多模态音视频联合生成架构,支持文字、图片、音频、视频四种模态输入,集成了目前业界最全面的多模态内容参考和编辑能力。具体看来,允许用户同时输入多达9张图片、3段视频、3段音频以及自然语言指令,模型可参考输入素材中的构图、动作、运镜、特效、声音等元素,打破传统视频生成的素材边界。从Seedance 2.0官方展示的视频来看,Seedance 2.0能高保真地合成时序精密的复杂交互场景,比如在双人花滑场景中,模型较好地演绎了同步起跳、空中旋转、精准落冰等一系列高难度动作;在细腻的特写镜头中,模型生成的画面能够展现出高度逼真的细节与严密的物理逻辑,例如微妙的光影折射变化、衣物随风颤动时所呈现的重力感。此外,Seedance 2.0还升级了音频能力,集成双声道立体声技术,可实现高仿真、沉浸式的音效生成,模型支持背景音乐、环境音效或人物解说等音频多轨并行输出,精准对齐画面节奏。由于Seedance 2.0可大幅度降低专业音视频内容的制作成本,缩短生产周期,其适配的应用场景包括商业广告、影视特效、游戏动画等,一经上线便引发了影视和游戏行业从业者的集体关注。著名导演贾樟柯在个人微博发文称,“Seedance 2.0确实厉害,我准备用它做短片。”罗永浩今日转发该微博,并表示,“接下来,拍……做一部电影只需要导演一个人了。”