https://www.bilibili.com/video/BV1WT4y1p7zz/?vd_source=c493b2666902c3dc70d67d34ecc1e09a
先说我的结论:AI 真是是电影行业的 Game Changer 。继上一个美术行业被颠覆之后,今年被颠覆的应该是好莱坞了。
全程不过是花了 6 个小时,302 张图片,42 个镜头,就做出来了。
目前用 MJ+Runway+Pika 做 AI 电影的大致工作流(后面我有时间会详细补充说明制作流程):
1.构思一个剧情或 Concept,据此来确定所需分镜的 MJ Prompt ,可以自己反复尝试找到最佳的 Prompt 模板也可以让 ChatGPT 来帮你生成分镜和描述
2.用 MJ 画出满意的分镜或概念图,通过 Prompt 模板尽量保持分镜图的风格一致,如不同分镜图的 Prompt 画面描述部分有差异,但画风描述部分保持一致
3.将 MJ 生成的分镜图导入到 Runway 中生成视频(或者 Pika 也行,现在 Pika 效果也不错),记住不要输入任何 Prompt ,并在设置中取消 Interpolate 和 Upscale 选项的勾选后直接点击生成即可( Runway 的相关算法目前并不好用)。由于可以多个 task 并行,一张图开始生成后可以立马换下一张图进行视频生成,看到满意视频的就下载,不满意的就再生成一次,担心变视频的效果不好的话可以尽量减少画面元素主体数量,并让你希望强调的元素主体占更大的画面
4.将生成好的视频导入到 Topaz Video AI 等类似工具进行 Upscale (超分辨率)和 Interpolate (插帧),Upscale 的数值建议是越大越好,插帧的环节记得勾选取代重复帧(之前 Gen-2 生成的视频会有 3 帧的重复帧),这样会使生成的视频更加清晰和平滑
5.将生成好的 4s 视频片段导入视频剪辑软件中,按照你的想法剪接为成片