AIGC短片:梦中之梦
担任职务AIGC技术指导、动态生成、AI音乐制作
获奖评语
轻盈,简单又复杂。帘欲静而风不止,平淡的下午荡起层层涟漪。似博尔赫斯《巴别图书馆》,每个人讲述各自的梦,每个人寻找各自那本书。从废话中发现真理,从无聊中发现意义。AI即是我们的“沙之书”
上面这段话是第十届86358贾家庄短片周获奖时的评语。
《梦中之梦》获得第十届86358贾家庄短片周 AIGC短片单元最佳影片,并先后入围 5TH·FBS新青年影展、2026 法国昂西国际动画节 MIFA·即梦AI动画国际峰会、第43届德黑兰国际短片电影节(TISFF)国际竞赛单元。
先找到梦的样子
导演周亚欧找到我的时候,故事已经有了大体的轮廓。我们想一起用 AI 做一部动画短片,但还没有决定,它应该长成什么样子。
我们看了不少动画参考:有的颜色轻快,画面里却藏着奇怪的东西;有的保留了粗粝的笔触,人物的表情和动作也不那么规整。我们想从这些画面里找到一种感觉,能让日常的聊天自然地走进梦里。
前期动画参考 · 左右滑动观看
有了这些方向,我开始用 Midjourney 的 Style Creator 做风格尝试。经过几轮选择、调整和再生成,我们慢慢收敛出一套适合这部片子的画风,也把几个人物的形象定了下来。
对我来说,风格好看只是第一步。它还要能延续到不同人物、不同角度和不同场景里,成为后面制作时可以反复参照的依据。
让画面动起来,也留住画的感觉
动态阶段,我主要测试了可灵 O3 和 Seedance 2.0。我们希望保留一种接近 Live2D 的感觉:人物在表演,但画面仍然像一幅画。在这部片子的测试里,可灵 O3 的整体表现更接近这个方向,所以大部分镜头由它来完成。
但它并不能解决所有镜头。水下的动作,以及人物在墙上爬行的段落,可灵对动作的理解有时不够准确。我就换用 Seedance 2.0 来补充这些部分。作为技术指导,我需要判断每个镜头卡在哪里,再选择合适的生成方式,把它放回同一部影片里。
让同一段旋律,走进不同的梦
大部分镜头做出来以后,我们进入了剪辑阶段。导演给我听了一段音乐,我很喜欢它的感觉,也开始想:这部片子能不能有一段属于自己的旋律?它可以反复出现,每次听起来又不太一样。
我先用 GPT 辅助整理旋律和编曲方向,再到 Suno 里试做不同版本。我给这些尝试设了一个共同的起点:固定和弦 Dm11(add9),以及一段八小节的旋律母题。小调、悬浮、水、梦,还有一点没有解决的不安,是我希望它始终保留的感觉。
同一个和弦 · 同一段旋律 · 不同编排
Dm11(add9)
D–F–A–C–E–G
查看八小节旋律设定
固定和弦:Dm11(add9) 音:D–F–A–C–E–G 感觉:小调、悬浮、水、梦、未解决、轻微恐怖。 固定旋律,8小节,20秒: | D4(q) E4(q) F4(h) | E4(q) D4(q) A3(h) | D4(q) F4(q) G4(q) E4(q) | F4(h) E4(q) D4(q) | A3(q) C4(q) D4(h) | E4(q) F4(q) E4(q) C4(q) | D4(q) A3(q) C4(q) E4(q) | D4(w) |
q / h / w 分别表示四分、二分、全音符。以上为创作时的生成设定。
接下来才是变化。我把方向从爵士调整成更轻巧的动画配乐,用口哨、木琴、马林巴、单簧管、拨弦和小打击乐去试不同的质地。同一个旋律,可以轻快,也可以变得犹豫、紧张,或者有些陌生。
人物长时间聊天时,我希望编排短促一点、空隙多一点,让音乐托住对话。到了梦、水和异化的段落,再改变乐器、停顿和密度,让那段熟悉的旋律露出不同的面貌。结尾则希望重新带回最初的旋律,让声音也形成一个回环。
我想通过这套方法,让不同章节听起来仍然属于同一个世界,也让音乐与梦境之间慢慢建立联系。和弦维持整体的气质,旋律留下记忆,乐器和节奏负责变化。比起为每个场景重新找一首歌,我更愿意围绕这段旋律继续往下写。
查看音乐方向讨论记录
把时间留给创作
做完这部片子,我更在意的是这些工具怎样服务故事。画风要选哪一种,人物应该怎么动,音乐在哪个地方回来,最后都要放进影片里判断。
相比过去绘画、动画软件制作的流程,这次我们能更快看到一个想法的样子:在 Midjourney 里试画风,在可灵和 Seedance 里试动作,在 Suno 里试音乐。许多原本要花很久才能验证的事情,现在可以先做出来,再一起讨论、调整。
AI 的能力还在变化,但它已经改变了我们工作的方式。我希望把省下来的时间继续用在创作上,多试一种可能,也多打磨一个细节,让最后留下来的东西更贴近我们想讲的故事。
参考与工具
美术参考 · 前期收集的动画影像
风格探索 · Midjourney · Style Creator
动态生成 · 可灵 O3 / Seedance 2.0
音乐构思 · GPT
AI 音乐制作 · Suno