2023-08-08 11:17
这是世界上首部完全由AI每帧生成的电影！分享借助AI工作流实现影视内容全流程创作实战案例
创作者：@Waymark
AI绘画工具：Midjourney+Runway组成工作流
工具介绍：
Midjourney一个领先的AI绘画图像生成器工具。通过创造新的人机交互方式，让人们能够更自由、更深入、更有趣地表达自己的想法和创意。利用了最先进的深度学习技术，让用户可以通过简单的文字提示，生成各种类型和风格的图像，从而实现视觉想象的无限可能；
Runway是一个基于人工智能的内容创作工具，使用它可以生成各种类型的艺术作品，包括图像、音乐、文本和视频等。它使用最先进的深度学习技术和算法，使得用户可以通过简单的交互式界面定制和控制模型，生成独特的创意作品。为了生成视频，你需要在Runway中选择相应的模型。一些模型可以生成静态图像，但有些模型可以生成动态的视频。
工具链接：
Midjourney https://www.aieva.cn/sites/404.html
Runway https://www.aieva.cn/sites/251.html
在过去，人们对于AI应用于影视产业的最大期待，或许就是AI演员换脸、协助撰写剧本、协助绘制导演分镜等等，但未来这一切很可能发生剧烈转变。下面这则视频，是世界上第一部真正意义——从头到尾由AI技术生成的电影，准确地说是微电影：《冰霜》（The Frost）。
《冰霜》的故事讲述了一个全球极端气候变迁背景下的灾难片剧情：在南极大陆寒冷的深处，一支科考队正在调查一个怪异的信号，不知不觉地踏上了一段可怕的旅程，他们即将发现的一切，都将颠覆自己对过去与未来的一切认知。
EVA看完之后感觉，抛开细节不谈，AI制作的影片特效质感与氛围感不输好莱坞经典灾难片《后天》，只缺一个顶尖的导演与编剧。
制作团队来自一家来自美国底特律名叫Waymark的广告制作公司，他们甚至为这则影片开发了一个宣传网站，多少有点“炫技”的意味。
为了制作生成这部影片，该团队运用了多项主流的AI生成工具技术。包括大语言模型协助制作脚本、利用图像模型生成画面、人脸图像识别技术让人物“活起来”，以及AI语音合成配音等等。
该团队的制片人表示：“我们利用AI建构了一个新的世界，虽然目前呈现出怪异的美学视觉，但我们仍然选择张开双臂欢迎它！”影片是如何制作出来的？
《冰霜》影片里边所有的画面，均由全球知名人工智能研究公司OpenAI开发的图像生成模型DALL·E 2创作。
丨影片部分剧照丨
据外媒报道，为了制作这部微电影，团队的导演首先借助ChatGPT撰写剧本，并将生成的提示词输入DALL·E 2模型当中。经过一番艰苦卓绝的尝试和调整后，大模型生成了他们满意的风格图像。
紧接着，制片人将DALL·E 2生成的每一个分镜画面，导入名为D-ID的“图生视频”AI工具，将静帧的人物肖像图像变为动态，让剧中的人物实现眨眼与嘴唇开合等等，就好像《哈利波特》电影里边霍格沃茨墙上会动的肖像画那样。
最后，将AI工具们生成的素材，导入Adobe公司开发的3D动画在线制作平台Mixamo 3D。让画面里边的人物行走起来，让静帧的画面连贯而有规律地动起来，再与AI生成的人物台词配音合成导出。影片制作中遇到的挑战
利用AI生成图片稀松平常，但是用于制作一则有故事性与逻辑性的影片则不然。该团队表示，为了实现分镜效果，他们付出了诸多尝试与努力，采取了各式各样的提示词，以求达到想要实现的艺术指标。充分调动DALL·E 2对于不同镜头机位（特写、广角、全景、鸟瞰等等）的理解，控制它精准输出想要的画面。
丨影片部分剧照丨
导演表示，尽管我们对于AIGC的刻板认知停留在——一键生成图片、几分钟完成一项任务、几个小时创作一部影片，但是这支由7个人组成的制作团队，依然为影片的诞生付出了较多的“人类劳动”。因此，导演在宣传海报上特别强调影片“Made By Human Artists”（由人类艺术家制作完成）。
AI生成的图像具有概率学上的不确定性，为了给观众营造身临其境的灾难片场景，制作团队付出了较多的时间去研究不同的提示词方案。从这一点看，EVA认为从某个侧面佐证了一部分人认为“AI无法取代人类创造能力”的观点。比如新上映影片《奥本海默》的导演诺兰就提出了类似的观点。
此外，这部由许多静帧图像和长短不一的视频片段拼凑的微电影，依然存在许多的画面破绽，包括怪异的人物动作与表情神态等等。这恰恰是目前AI生成技术应用于影视制作还不够成熟的部分，但已经是当下所能呈现的最佳画面。
家人们，洗完本文的应用案例对你有所启发！以上，感谢大家的阅读～希望对大家有所帮助。
相关文章
Altman
