@Haneno 在 最近在折腾 AI 视频自动化,有没有好用的开源项目推荐? 中发帖

最近在折腾 AI 视频自动化,想做一套能持续生成固定角色短视频的工作流。 
目前接了几个视频生成 API,视频是能跑出来了,但实际用下来发现问题还挺多的。
最头疼的是角色一致性和动作控制。比如同一个人物出现在不同视频里,脸、衣服、发型有时候会变。多角色互动就更麻烦了,明明 Prompt 里写了先做什么、后做什么,生成出来经常不按顺序走。尤其是那种有反转、有笑点的小剧情,画面看着不错,但故事没表达出来。
另外 API 这块也踩了不少坑。有些模型突然不可用,有些任务排队很久,失败了只返回一个很笼统的错误。还碰到过参考图片链接在浏览器能打开,但上游模型就是读取失败的情况。
现在想把分镜、Prompt、视频生成、任务状态、失败重试、成片检查这些环节尽量串起来,最好还能自动切换不同的模型接口。
看过 n8n、ComfyUI、Remotion,但还没想好怎么搭配比较合适,也不想一开始就搞得太复...