Claude Sonnet 5.5 在 ComfyUI 全自动生成一支摇滚音乐视频
2026.10.26 · 产品 · AI 创作 · 本人发布
作者只给一句提示词，Sonnet 5.5 自主完成作词、作曲、分镜与视频生成。
一位用户用自研 Video Builder 的 MCP 功能，让 Claude Sonnet 5.5 仅凭一句提示词自主完成一支戏剧化摇滚/金属音乐视频。Sonnet 自行用 Krea2 生成乐队与场景参考图、写歌词、用 YUE2 作曲、用 Minimax H3 生成视频，并逐场景检查、修正提示词重跑最多 3 次，全程未打开 ComfyUI，无后期剪辑。
- 提示词仅为“Create a theatrical rock/metal music video with creative costumes. Female singer.”，其余由 Sonnet…
- Sonnet 用 Krea2 生成乐队与场景参考图，自行写歌词、用 YUE2 作曲并编写完整故事与各场景提示词
- 视频由 Minimax H3 生成，采用两段式设置：第一段 25 步，第二段 8 步 768p turbo LoRa、4 步、0.35 去噪并配合 latent upscale
- 生成后 Sonnet 逐帧检查每个场景，发现问题就改提示词重跑，最多 3 次，整夜运行，次日直接得到成片
- 作者在 GitHub 开源了 Video Builder，并提供使用相同设置的单场景两段式 ComfyUI 工作流
为什么值得看
展示一句提示词驱动全流程自动化创作音乐视频的完整链路
适合谁关注
关注 AI 视频生成、ComfyUI 工作流与自动化创作的人