【《Dear Upstairs Neighbors》由Google AI協作製成的動畫短片】

《Dear Upstairs Neighbors》日前於Sundance Film Festival 首映,動畫短片由資深動畫製作人 – 包括導演Connie Qin He(前PIXAR動畫的Story Artist), Supervising Animator – Cassidy Curtis 及 VFX Supervisor – Sarah Rumbley 跟 Google DeepMind 的研究人員合作創作完成, Google發放短片預告及專題文章探索 generative tools 如何融入Artists的創作流程. 而當中4K新工具將於本月尾推出至 Google AI Studio 與 Vertex AI.

動畫師透過自訂藝術作品微調 AI models , 教導其獨特視覺風格以保持鏡頭一致性.Video-to-video 工作流程讓動畫師能以視覺方式引導 AI , 掌控動作與喜劇節奏. localized refinement 工具則允許針對影片特定區域進行編輯.
最後 Veo 的 upscaling 技術將畫面提升至 4K 同時保留藝術風格與細節.

當中的挑戰與解決方案 :
Fine-tuning
– 研究人員建立工具, 讓Artists能在 Veo 與 Imagen 上微調模型.
– 僅需少量範例圖像, 即可教導模型新的視覺概念.
Video-to-video workflows
– 動畫師以 Maya、TV Paint 等工具製作粗略動畫, 再由 AI 轉換成完整風格影片.
– 這種方式能精準控制動作、節奏與鏡頭.
Localized refinement
– 允許針對影片局部進行修正,而非重新生成整段.
– 例如在 Ada 的髮型上增加細節,確保剪影符合角色設計.
Upscaling to 4K
– 最終使用 Veo 4K upscaling model 提升解析度.
– 此技術即將在 Flow、Google AI Studio 與 Vertex AI 上提供.

>>> 這部短片展現了 generative AI 與傳統動畫結合的可能性. Artists保持創作主導權, 同時利用 AI 提升效率與風格表現. 研究人員也在過程中獲得寶貴的技術藝術經驗, 推動 generative AI 與專業影像製作的融合.