为 Seedance 2.0 提供的不只是一个句子和一个主体:你可以用文本、图像、视频或音频引导它,让它同时塑造动作、镜头和声音。在 CawCut 中,Seedance 2.0 已集成到 [视频生成] 节点中,并支持文本、图像参考、帧和全能参考模式。它可以生成最长 15 秒的多镜头音画片段、处理复杂互动,并生成 4K 视频。
1. Seedance 2.0 的优势
| 优势 | 应用场景 |
|---|---|
| 多模态参考控制 :使用文本、图像、视频和音频输入来引导构图、动作、镜头、视觉效果和声音。 | 创作一个场景,将特定角色或产品外观与指定动作、镜头运动、视觉风格和声音方向结合起来。 |
| 复杂且符合物理规律的动作 :旨在提升动作稳定性、物理准确性以及主体之间的互动表现。 | 设计接触过程和因果关系清晰的动作,例如手拿起物品、两个人传递道具,或一支队伍进行协调一致的动作。 |
| 多镜头音画生成 :生成镜头衔接连贯、音画同步的序列,片段最长可达 15 秒。 | 通过铺垫、变化和结果讲述一个简短故事,或制作视觉递进清晰的短篇商业广告。 |
| 镜头和表演指导 :可响应镜头运动、灯光、阴影和主体表演方面的指导。 | 创作电影感的揭示镜头、跟随动作穿越空间,或以特定节奏和构图指导表演。 |
| 4K 输出 :支持高分辨率视频输出,满足精细的最终交付需求。 | 制作适用于大屏幕、高细节产品展示或 4K 后期制作流程的精致片段。 |
2. 选择模式和输入内容
根据希望影响生成结果的参考素材,在视频生成编辑器中选择相应模式:
| 模式 | 适用场景 | 输入内容 |
|---|---|---|
| [文本] | 根据文字说明创建场景。 | 描述主体、动作、场景、镜头和声音的提示词。 |
| [图像参考] | 为静态图像添加动态效果,或引导主体的视觉特征和场景构图。 | 图像或角色参考素材,以及动作指导。 |
| [帧] | 定义特定的开场构图,并可选定义结尾构图。 | 首帧图像、可选的末帧图像,以及对转场的描述。 |
| [全能参考] | 组合多种参考素材来指导一次生成。 | 图像、角色参考素材、视频、音频,以及说明每项参考素材作用的提示词。 |
如果你的想法适合用一个场景来描述,请使用文本模式。如果静态图像、表演、镜头运动或音频提示对最终片段很重要,请添加参考素材。如需查看完整的模式指南,请参阅视频生成。
3. 准备参考素材和提示词
Seedance 2.0 支持混合媒体,因此请明确说明每项素材的作用:
- 图像或角色参考素材: 指明需要保留的主体细节,例如服装、轮廓、颜色、产品形状或地点。
- 视频参考素材: 说明它应如何指导动作、镜头表现、构图、节奏或场景结构。
- 音频参考素材: 说明它应如何指导对白、音效、音乐、节奏或氛围。
- 分镜图像: 说明画格应如何定义镜头顺序、构图、视觉风格或文案。规划序列时,请参阅图像分镜。
编写有效的视频提示词:
- 先描述主要主体和动作。
- 将多镜头片段拆分成按顺序排列的简短节拍。
- 为每个节拍指定一种连贯的镜头运动,例如跟拍、摇摄、推近或固定镜头。
- 说明关键互动,包括谁或什么与其他对象接触,以及接下来会发生什么。
- 仅在有助于传达场景时,添加灯光、视觉风格、对白和声音指导。
- 说明哪些细节应保持一致,哪些细节可以变化。
Seedance 2.0 适合处理复杂动作,但如果提示词同时要求发生许多无关事件,内容仍可能难以理解。请围绕一个核心动作构建序列,并确保转场清晰易懂。
4. CawCut 工作流和设置
- 打开一个工作流并添加 [视频生成] 节点。
- 选择 [文本]、[图像参考]、[帧] 或 [全能参考]。
- 从模型菜单中选择 Seedance 2.0。
- 添加所选模式需要的参考素材,并编写提示词,说明动作以及每项参考素材的作用。
- 设置时长、宽高比、分辨率和音频选项。如果需要模型生成的高分辨率输出用于精细的最终片段,请选择 [4K]。
- 查看积分预估,运行节点,并观看完整片段,检查动作、连贯性、声音和时序。
你可以将分镜或其他工作流输出连接到视频生成节点。如需了解如何规划或连接多步骤工作流,请参阅了解节点。如果之后要组合生成的片段,请参阅视频和转场节点。
5. 局限性和优化
Seedance 2.0 仍可能生成不稳定的小细节、表现欠佳的复杂多主体互动,或不够准确的物理动作。音频也可能失真,而详细的指令无法保证时序或文字完全准确。请将参考素材视为指导,而不是逐帧锁定的依据。
| 如果发现 | 可以尝试 |
|---|---|
| 互动的物理过程不够清楚 | 将起始位置、接触或动作过程以及最终位置分开描述。 |
| 镜头或主体的移动与预期不同 | 将指导简化为一个主要镜头运动和一个主要主体动作。添加视频参考素材来指导动作或镜头。 |
| 角色、产品或场景发生偏移 | 使用更清晰的参考素材,并说明哪些视觉特征必须保持一致。移除暗示相互冲突设计的参考素材。 |
| 音频与动作不匹配 | 在提示词中分别说明对白、环境音、音效和音乐,并指出每项内容应在何时出现。 |
| 片段显得过于拥挤 | 减少故事节拍数量,并优先呈现关键互动或视觉揭示。 |
每次只修改提示词或参考素材中的一个部分,这样才能判断哪项调整起了作用。如需了解模型替代选项和相关使用说明,请参阅支持的模型。生成更高分辨率或更长的片段前,请查看积分。