AIGC落地应用教程丨关于如何利用AIGC工具进行古诗词视频制作
前言
这是AIGC应用系列教程,之前给大家详细介绍了AIGC做海报、微信红包、动态引导页,这一篇给大家介绍AIGC辅助古诗词视频设计的全流程!
直接上干货,手把手保姆级教程保证轻松完成。
目前AIGC在设计中的可行性更为广泛,AI绘画做海报、角色设计、漫画、3D场景设计大家都已经耳熟能详。自去年年底AI视频开始爆火,近期央视首部文生视频AI动画《千秋诗颂》和首部AI全流程微短剧《中国神话》开播,结合AI新技术弘扬中国传统文化,我看后很受启发,加上最近AI音乐上也迎来了高光时刻。这次也尝试结合AI绘画、AI视频、AI音乐,全流程制作一首古风诗词视频。
Step1 古诗选择
在众多古诗词中,我选择了宋代李清照的作品《如梦令》,全词如下
昨夜雨疏风骤,浓睡不消残酒。
试问卷帘人,却道海棠依旧。
知否?知否?应是绿肥红瘦。
这首词的标题《如梦令》暗示了整个作品的感情基调——如梦如幻,似真似幻,不禁让人联想到一种不可捉摸和稍纵即逝的美好。这里不仅描绘了海棠花从盛开到凋落的过程,也隐喻了人生或爱情的兴衰变迁,以及词人对过去时光的怀念和对现实的无奈感慨。
Step2 风格构思
关键词提取:这次是设计古风诗词《如梦令》,选择中国风、古代庭院、古风女子、海棠花、花瓣飘落等作为画面关键词。
Step3 设计工具
这次用到的主要是ChatGPT写分镜,WHEE的文生图来设计视觉主图,Photoshop进行调整色调和排版设计,AI音乐工具来生成歌曲,AI视频工具来制作动态画面。更多AI视频教程可以查看我的公众号「姚十八设计」里面有系列教程。
3.1 分镜探索
初步制定主题为「新如梦令」古风主题,因为诗词和风格已经确定,接下来就可以直接使用AI工具帮我写视频分镜。主要写了十个基础分镜,后期再根据生成的图片调整分镜。
3.2 主图风格探索
诗词整体的风格偏忧伤,古诗主图的设计,背景设定为一个中国传统的室内场景,窗外下着雨。主角为一位穿着古风的女子,姿态温婉而含蓄。整体画面是采用温暖而柔和的色调为主。
接下来尝试主图的风格探索,控制提示词相同,选择不同模型生成的图片效果,比如:工笔重彩、岩彩画、诗意水墨、传统仕女图画风、新中式水墨风、咏春,然后等待生成效果如下。
提示词:中国古代,一位美丽的中国女子,坐在窗边,窗外下雨。
每种风格模型的效果都很不错,在众多模型中,我选择「咏春」为基础模型,配合「岩彩画」、「诗意水墨」,调节两个模型不同强度再继续调节主图效果。
使用咏春模型和岩彩画模型生成图片,调节模型的不同强度,岩彩画在强度较大时无法表达窗外下雨的画面,在较低时较为适合。
使用咏春模型和诗意水墨模型生成图片,调节模型的不同强度,诗意水墨强度较高时水墨感较重不适合表现人物,强度较低时风格更好。
最后,我选择「咏春」60% 配合「诗意水墨」30%作为基础模型来生成图片。
3.3 主分镜图
选择好模型后,按照分镜提示词,分别生成十个分镜,保证每个分镜生成至少2张满意的图片,下载下来,用于后期出视频。
最近,AI 音乐的 ChatGPT 时刻来临啦!Suno V3发布,引发了广泛关注。
Suno 对音乐新手来说几乎毫无门槛。它能够处理从间奏到主歌、副歌、桥段直至尾奏的完整结构,旋律层次和乐器搭配均展现出极佳的感觉,将歌曲的氛围和情感表现得淋漓尽致。
这次我也选择使用Suno来制作《新入梦令》的曲子,如梦令的诗句内容较短,这次我也保留原作不做歌词的扩展。
4.1 登陆注册
Suno官方网站:https://app.suno.ai/
目前有三种方式分别为:Discord、Google Mail、Outlook可选择以下任一方式注册。
4.2 主操作界面
在创造界面的「Custom Mode」自定义模式下,大家可以自主创作歌曲。主要为以下三个部分需要去定制。
Lyrics(歌词)/ Instrumental(没有歌词的纯音乐)
Style of Music(风格)
Title(标题)
4.3 歌词提示词
对于没有乐理知识,不懂音乐的朋友,在歌词和曲风上可能有点摸不清楚,推荐用魔法打败魔法,使用AI聊天工具 ChatGPT、Kimi等,生成你想要的歌词、曲风以及标题。
歌词提示词:在歌曲创作中,歌词的结构通常会有特定的标记来指示不同的部分。以下是歌曲结构中常见的标记及其详细介绍的表格:
4.4 曲风提示词
曲风提示词:歌曲元素表格,这表格可以帮助作曲家和制作人在创作过程中作出选择,以匹配他们想要表达的特定风格、情绪和场景。
4.5 《新如梦令》
接下来,我将李清照的《如梦令》放到歌词(Lyrics)里,按照 Verse(诗歌部分 / 主歌)、Chorus(合唱部分 / 副歌)两部分划分,歌曲风格提示词选择「灵魂乐、人声、仙境、管弦、古筝、中高音」,歌名就叫《新如梦令》。需要注意的是,音乐风格填写英文更易识别。
Prompt :Soul,acoustic, ethereal,Strings,Guzheng,Mid/High pitch(灵魂乐、人声、仙境、管弦、古筝、中高音。
歌词:
Verse:
昨夜雨疏风骤,
浓睡不消残酒。
Chorus:
试问卷帘人,
却道海棠依旧。
知否?知否?
应是绿肥红瘦。
这首 Suno生成的《新如梦令》结合了中国传统乐器古筝和西方管弦乐,女声唱出了淡淡的忧愁,整体歌曲还是很不错的!
由于诗词较短,我没有做扩展所以只有十几秒,后面就是suno自由发挥的副歌部分。我选择前20秒作为《新如梦令》的歌曲,开展分镜的视频制作。
五、 AIGC视频设计步骤
接下来重要的一步,使用AI视频来做古风视频,在AI创作工具中找到「AI视频工具」。
5.1 图生视频
打开后可以看到两种模式,图生视频和文生视频。目前AI视频工具还在内测,这次使用前面生成的分镜图来制作视频,选择「图生视频」来创作。
点击按钮
在主操作界面中,可以选择直接上传图片,把制作的图片上传进来。
查看视频
选择原图默认比例,点击「生成」等待就可以啦。右边可以看到生存的记录。
5.2 生成效果
目前生成为4s视频,可以看到生成的视频中在人物方面运动幅度有些小,在物体运动方面海棠花雨水滴落的效果还是很不错的。
5.3 后期剪辑
把AI生成好的视频和歌曲放到剪辑软件中,把卡帧和模糊的视频剪辑掉,加入歌曲名称和歌词字幕,至此古风诗词《新如梦令》视频设计完成!
5.4 设计步骤总结
回顾整个视频设计流程。
第一步AI绘画工具生成图片:生成主图「新如梦令」,确定提示词,主视觉元素和使用的风格模型。
第二步AI音乐工具生成音效:生成《新如梦令》歌曲。
第三步AI视频工具生成视频:目前生成为4s视频,可以看到生成的视频中在人物方面运动幅度有些小,在物体运动方面海棠花雨水滴落的效果还是很不错的。
AIGC工具发展迅速,开启了人工智能赋能创作的新篇章。
赶紧利用AI绘画和AI视频来设计你的短片吧!操作简单易上手,让你轻松完成。
我是yaoyao,快来跟我一起学习AI吧!让我们保持学习,2024年脱颖而出。
喜欢就点个赞吧~
近期文章
更多