當前位置: 華文世界 > 科技

AI動畫可以開做了!

2024-10-14科技

來源:靠譜二次元

「老話題,新機遇。」

如果有一天,大家的動畫都用AI來做,這個行業會好嗎?

2024年2月,OpenAI的AI視訊生成產品Sora釋出了演示視訊,曾引發了不少包括動畫在內的影視相關從業者的恐慌。在他們眼裏,這種透過文字參數就能生成視訊的產品一旦問世,將會給已有成熟的影視工業體系帶來極大的沖擊。

8個月過去,雖然Sora依然沒有正式釋出,甚至Sora計畫的負責人Tim Brooks已經在10月4日官宣離職,讓這一計畫的未來充滿了未知。但與此同時,包括快手的可靈,字節的即夢在內的國產視訊AIGC產品陸續開放使用, 許多影視從業者加入了平台支持的AI影視大賽中,劍指下一個AI影視內容風口。

在番劇動畫領域,目前還並沒有商業性質的AI作品面世。但 在動態漫畫、豎屏短漫等領域,AI內容早已滲透其中,工業化流程已經被一部份人積極利用,獲得了不錯的流量和收益 。在AI參與動漫領域創作成為必然趨勢的背景下, 及時地探索全流程AIGC動畫,既是小成本新團隊彎道超車的機會,也是老牌公司適應平台需求並保持領先的優先選項。

總之,AI動畫確實可以開始做起來了。

全流程已跑通,風格化初步實作

目前,AI技術已經被成功地套用到動畫制作的各個環節,並且在一些計畫中實作了從概念到成品的全流程套用。此前就有動畫公司在前期階段積極引入AIGC,在已有人物資產、場景資產上進行一部份內容的補足,例如透過AI文生圖制作一部份場景,或是用AI外掛程式批次化生成角色。今年AI技術的迅猛發展後,已經有公開的AI產品能夠完成對已有故事的重寫和分鏡設計,協助動畫公司加速故事線的創作。

因此,在前期的劇本設計、分鏡設計、畫面描述階段, AIGC產品已經擁有了讓動畫團隊加強協同,降低溝通成本的作用, 甚至有團隊已經嘗試透過建立智慧體(Agent),讓已有大模型學習大量現有網文、動畫內容,直接模仿、生成全新劇本,透過模仿成功案例,降低編劇創作壓力。

此前全流程AI動畫的阻礙,也隨著Sora、可靈、Runway等產品的陸續面世和完善過程中得到改善。目前動畫團隊可以透過自己擅長的AI文生圖體系,首先生成關鍵性的故事場景和分鏡,再透過圖生視訊AI產品將靜態畫面組織起來,完成多個動態畫面。再根據動態畫面,使用TTS、RVC等技術進行AI配音及AI配樂,最終加以簡單的剪輯,即可完成整個AI動畫的制作。

和上半年AI動畫受制於AI視訊工具的能力限制,部份情況只能生成6秒左右視訊內容的狀態相比, 目前大量AI視訊生成產品不僅能夠生成更長的視訊片段,還能在相對完善的透視體系下完成運鏡。

綜合來看,擋在AI全流程動畫的壁壘都已經不存在了。願意觀察、體驗的AI內容創作者們已經可以進行AI動畫的創作。和傳統的動畫工業相比, AI動畫創作中依舊存在著不穩定性,創作者想得到需要的動畫視訊片段,仍依賴大量的「抽卡」獲得,且畫面精度和傳統動畫比存在較大差距。 另外,AI動畫依舊有肉眼可見的AI痕跡,挑剔的觀眾可能會對此有一定的反感。

不過,在短視訊平台尤其是低幼相關內容上,AI動畫已經能被更多觀眾包容,甚至開始占領一部份低齡觀眾的心智,存在著不小的潛力。此外,主張降本增效,還得全力保障S級動畫大作上線,亟需普通動畫補足內容時長的一些長視訊平台,隨著AIGC技術的成熟,也開始落實起AI動畫的制作和引進工作。

廠商的進展&平台的態度

騰訊視訊動漫在9月舉辦了一場關於「AIGC賦能短番創作」的線下交流會,根據會上透露的數據來看,騰訊視訊創作號中有50%以上的短番創作者在借助AI生產內容。雖然這些短番作品中鮮有爆款,但對於平台來說,這些能夠有效填充站內動漫類作品數的內容還是非常有用的。騰訊視訊動漫舉辦了「AIGC短番創作大賽」,直接為優質成品提供扶持,讓創作者自行創作,也可以從中選擇一批能夠用好AIGC的內容創作者。

優酷動漫則引入了AI動漫創作的整條管線,為平台內已有的動畫創作者提供全方位的AI支持,與國際接軌推動AI技術融入生產一線提升效率。根據優酷AI動漫制作新管線的構思,在未來,劇本創作、概念設計等階段可以透過文字AI大模型協助完成;角色創作、場景制作則能結合圖片AI大模型參與其中;在傳統動畫工業領域裏的動畫解算、特效制作、燈光渲染合成等工序,也有廠商進行了AI外掛程式的設計,進一步提升了動畫制作的效率;而剪輯配音環節,隨著AI剪輯工具的陸續面世,以及AI配音工具的完善,讓剪輯變得更為便捷。傳統動畫制作的廠商,也能獲得AIGC帶來加速原本動畫制作流程的紅利。

圖源:優酷動漫

在UGC主導的快手、抖音、B站等平台,已經有不少AI動畫釋出,且觀眾群體有對AIGC感興趣的人群。隨著自建AI視訊大模型的快手和抖音開放AI創作工具,相關的AI短片創作大賽也已經開啟,不少學生、獨立動畫創作者都已經加入了創作的行列。

一個AI動畫可以怎麽做?

制作一個AI動畫,流程通常分為劇本創作和人設創作的前期階段,分鏡創作、配音制作、文生圖、圖生視訊的中期階段,以及剪輯的後期階段。 AI發展到今天,個人創作者利用市場上公開的工具,已經可以創作一個還不錯的AI動畫短片。

在劇本、人設階段,目前市場上通用的文本大模型基本具備了簡單的故事編寫能力,但綜合表現比較好的產品並不多,用在短番的創作上都有些欠火候。不過,將一個完善的故事指令碼發給相關的AI產品,讓其重寫類似的指令碼,並輸出成分鏡格式,對於優秀的對話類AI大模型不再困難。另外,一部份AI大模型已經可以透過閱讀指令碼,為作品設定出一套不錯的人設,可以在AI動畫的分鏡生圖階段提供很方便的助力。

通義千問生成的劇本分鏡和人設,參數見圖

根據我們的實驗,僅透過文字生成視訊,對於當下流行的AI視訊大模型還是不夠穩定,但創作者可以先用更專業的文生圖工具生成一些可供使用的AI分鏡,再將這些靜態圖片交給視訊大模型進行圖生視訊的工作,會更好地得到想要的效果。比如我們將一張由豆包AI隨便生成的圖片,交給可靈AI(1.5版本)進行圖生視訊,得到了一段雖然有瑕疵,但效果遠超動態漫畫的短視訊。

視訊由可靈AI 1.5生成

目前,快手可靈等AI視訊產品已經支持了人物對口型的操作,所以在制作視訊的同時,也可以透過TTSMaker等工具生成AI配音,將對應配音檔上傳後,就能得到一段對好口型的視訊。音樂上,創作者可以使用Suno等AI音樂工具生成獨特的BGM,留給最終的剪輯使用。

最後,創作者只需要選好AI視訊產品生成的片段,再將BGM、配音合成,加上需要的文字、字幕,一段AI動畫就做好了。哪怕整個團隊只有一人,也能在幾天時間內完成一集AI風格明顯,但在傳統動態漫畫水平之上的動畫短片。

AI動畫時代會好嗎?

和你看到的一樣, AI動畫的上限從人類的想象力演變成了AIGC的創作能力 。雖然演示中的劇本生成,人物形象,視訊生成等環節仍然需要AI多次生成並由創作者篩選,但利用AI創作動畫的整個流程,除了更為精細的剪輯之外,已經能用AIGC工具全部完成了,這讓不少沒有動畫產能的內容團隊有了入局動畫市場的能力。

AI動畫【我是瓦貓】片段-來源:阿湯AI搞事兒

時至今日,很多觀眾依然十分反感AI作品,但在短視訊平台上,無論是AI配音深度參與的行銷號內容,或是由AI插畫組成的熱門懸疑故事短片,都已經常態化。更有甚者,還將這部份熱門短片,交給AI產品進行重制加工,又一次投放進視訊平台,重新收獲一大批簇擁者。

假如動畫行業有一批人也這樣去做呢?將一部或是多部動畫的內容交給AI辨識、學習、翻制,再以「新番」的名義投入市場,那麽國產動畫市場能否迎來新風口? 在AIGC工具使用成本越來越低的今天,大量AI動畫的到來已經離我們不再遙遠。 留給傳統動畫公司的機會,除了把畫面技術提升到AI以上,創作出更獨特的故事之外,可能只有擁抱AIGC,成為其中的一員。

也許我們會迎來國產動畫因AIGC變得更加繁榮的一天,但這一天來臨之前,誰也不知道它會是晴天,還是雨天。

本文作者:烏賊Nyan,由 編輯