跳到正文
Kwei 个人主页作品集 project library
跳到正文

AIGC短片:梦中之梦

担任职务AIGC技术指导、动态生成、AI音乐制作

获奖评语

轻盈,简单又复杂。帘欲静而风不止,平淡的下午荡起层层涟漪。似博尔赫斯《巴别图书馆》,每个人讲述各自的梦,每个人寻找各自那本书。从废话中发现真理,从无聊中发现意义。AI即是我们的“沙之书”

上面这段话是第十届86358贾家庄短片周获奖时的评语。

《梦中之梦》获得第十届86358贾家庄短片周 AIGC短片单元最佳影片,并先后入围 5TH·FBS新青年影展、2026 法国昂西国际动画节 MIFA·即梦AI动画国际峰会、第43届德黑兰国际短片电影节(TISFF)国际竞赛单元。

第十届86358贾家庄短片周 · AIGC短片单元最佳影片获奖公告 ↗

先找到梦的样子

导演周亚欧找到我的时候,故事已经有了大体的轮廓。我们想一起用 AI 做一部动画短片,但还没有决定,它应该长成什么样子。

我们看了不少动画参考:有的颜色轻快,画面里却藏着奇怪的东西;有的保留了粗粝的笔触,人物的表情和动作也不那么规整。我们想从这些画面里找到一种感觉,能让日常的聊天自然地走进梦里。

前期动画参考 · 左右滑动观看

01 · 日常形象的异化
02 · 怪诞与轻巧并存
03 · 色彩与想象
04 · 人物的表情与笔触
05 · 熟悉事物里的不安
06 · 平静中的超现实

有了这些方向,我开始用 Midjourney 的 Style Creator 做风格尝试。经过几轮选择、调整和再生成,我们慢慢收敛出一套适合这部片子的画风,也把几个人物的形象定了下来。

对我来说,风格好看只是第一步。它还要能延续到不同人物、不同角度和不同场景里,成为后面制作时可以反复参照的依据。

人物形象与场景尝试

让画面动起来,也留住画的感觉

动态阶段,我主要测试了可灵 O3 和 Seedance 2.0。我们希望保留一种接近 Live2D 的感觉:人物在表演,但画面仍然像一幅画。在这部片子的测试里,可灵 O3 的整体表现更接近这个方向,所以大部分镜头由它来完成。

但它并不能解决所有镜头。水下的动作,以及人物在墙上爬行的段落,可灵对动作的理解有时不够准确。我就换用 Seedance 2.0 来补充这些部分。作为技术指导,我需要判断每个镜头卡在哪里,再选择合适的生成方式,把它放回同一部影片里。

制作中的 AIGC 工作画板 · 人物、场景与镜头迭代

让同一段旋律,走进不同的梦

大部分镜头做出来以后,我们进入了剪辑阶段。导演给我听了一段音乐,我很喜欢它的感觉,也开始想:这部片子能不能有一段属于自己的旋律?它可以反复出现,每次听起来又不太一样。

我先用 GPT 辅助整理旋律和编曲方向,再到 Suno 里试做不同版本。我给这些尝试设了一个共同的起点:固定和弦 Dm11(add9),以及一段八小节的旋律母题。小调、悬浮、水、梦,还有一点没有解决的不安,是我希望它始终保留的感觉。

同一个和弦 · 同一段旋律 · 不同编排

Dm11(add9)

D–F–A–C–E–G

查看八小节旋律设定
固定和弦:Dm11(add9)

音:D–F–A–C–E–G

感觉:小调、悬浮、水、梦、未解决、轻微恐怖。

固定旋律,8小节,20秒:

| D4(q) E4(q) F4(h) | E4(q) D4(q) A3(h) | D4(q) F4(q) G4(q) E4(q) | F4(h) E4(q) D4(q) | A3(q) C4(q) D4(h) | E4(q) F4(q) E4(q) C4(q) | D4(q) A3(q) C4(q) E4(q) | D4(w) |

q / h / w 分别表示四分、二分、全音符。以上为创作时的生成设定。

接下来才是变化。我把方向从爵士调整成更轻巧的动画配乐,用口哨、木琴、马林巴、单簧管、拨弦和小打击乐去试不同的质地。同一个旋律,可以轻快,也可以变得犹豫、紧张,或者有些陌生。

人物长时间聊天时,我希望编排短促一点、空隙多一点,让音乐托住对话。到了梦、水和异化的段落,再改变乐器、停顿和密度,让那段熟悉的旋律露出不同的面貌。结尾则希望重新带回最初的旋律,让声音也形成一个回环。

在同一母题下,尝试不同段落的声音

我想通过这套方法,让不同章节听起来仍然属于同一个世界,也让音乐与梦境之间慢慢建立联系。和弦维持整体的气质,旋律留下记忆,乐器和节奏负责变化。比起为每个场景重新找一首歌,我更愿意围绕这段旋律继续往下写。

查看音乐方向讨论记录
音乐方向讨论 · 从共同母题到不同编排

把时间留给创作

做完这部片子,我更在意的是这些工具怎样服务故事。画风要选哪一种,人物应该怎么动,音乐在哪个地方回来,最后都要放进影片里判断。

相比过去绘画、动画软件制作的流程,这次我们能更快看到一个想法的样子:在 Midjourney 里试画风,在可灵和 Seedance 里试动作,在 Suno 里试音乐。许多原本要花很久才能验证的事情,现在可以先做出来,再一起讨论、调整。

AI 的能力还在变化,但它已经改变了我们工作的方式。我希望把省下来的时间继续用在创作上,多试一种可能,也多打磨一个细节,让最后留下来的东西更贴近我们想讲的故事。

参考与工具

美术参考 · 前期收集的动画影像

风格探索 · Midjourney · Style Creator

动态生成 · 可灵 O3 / Seedance 2.0

音乐构思 · GPT

AI 音乐制作 · Suno