只要隨手錄製一段視頻,AI就能把你完美放進動漫中!
無論是線條、色彩或光影呈現,都與美漫中的寫實風格如出一轍,動畫也是細膩流暢,幀數顯然不低:
製作這樣一部包含120個VFX(視覺效果)鏡頭的動漫,需要投入多少精力?
僅僅3個人就行,也無需服化和道具小組。
相較之下,先前拍攝的不少大片動畫特效往往需要投入大量精力,製作精良的團隊甚至達到上百人。
這部動漫被放到油管上後,三天就攬獲了150w 播放量,11萬 點讚。
已經有畫師看完感到害怕了:
我畢生致力於繪畫…然而這些幾年後就會被取代。
還有網友感到「兒時夢想成真」:
當年我還小的時候,一直以為動畫就是基於真實視頻做出來的。現在看到這個,覺得超酷。
那麼,這樣一部動漫究竟是如何製作出來的呢?
過程總共分為三個部分。
第一部分是用AI創作並產生動漫人物,建立它與演員之間的關聯;第二部分是創作動漫場景;第三部分是合成並調整最終動漫效果。
先來看看第一部分的用AI改畫人物動漫。這部分是用Stable Diffusion完成的,同時也採用了Google推出的DreamBooth擴散模型進行微調。
以動畫中的這個角色為例,左上角是演員原型,右下角是AI創作出來的動漫角色:
##這可不是直接把影片一幀放進Stable Diffusion中就能做出來的效果。 為了確保人物的動漫畫風達到他們想要的效果,作者們收集了經典動漫《吸血鬼獵人D》中的大量人物截圖,各種角度都有,將它們餵給AI: 同時,也需要讓AI學習並記住真人從臉部到身體上的各種細節特徵。 因此,要提前給演員拍攝不同光照、多個角度、各類動作下的大量照片: 這樣一來,就能讓AI在看見影片中的演員時,迅速以《吸血鬼獵人D》為作畫風格基礎,畫出演員長相的動漫風格人物。 至於在某些不容易掌控的人臉放大鏡頭中,也採用了ControlNet進一步控制產生的效果。 不過,直接用AI產生的動漫,還存在一個問題。 即使影格與影格之間的差異不大,銜接起來也不完全連貫,一些「重複橫跳」的髮梢和光影細節會導致畫面瘋狂閃爍:#作者們想到用DEFlicker去閃爍插件解決這件事,同時稍微調低一點幀率,確保畫面的流暢感。 第二部就是生成場景了,這部分作者們直接用了虛幻引擎和裡面自帶的一些3D模型,來製作動漫背景。 例如這段看起來非常酷的旋轉背景:
背後就是將大量場景照片合成起來,快速滾動做成的:
最後一部分就是合成之後的潤色了。
這部分倒是團隊自己完成的,他們在影片中一方面加入了部分3D模型(如一晃而過的蠟燭)來增加人物的沉浸感:
另一方面添加了大量復古的視覺特效,使得動畫看起來又精良了不少:
#最終就有了這部AI協助創作的動漫。
這部動漫創作背後的團隊Corridor Crew,來自一家名為Corridor Digital的美國製作工作室。
Corridor Digital成立於2009年,這些年來創作了不少特效為主的熱門短片。
比較為人所知的是2019年惡搞波士頓動力機器人的那個「Atlas的反擊」(New Robot Can Now Fight Back!)。
影片中Atlas被人們反覆霸凌虐待,最終忍無可忍,對人類發動攻擊:
這段影片一度被人們認為是從波士頓動力流出的真實錄像,直到Corridor Digital出面否認。
隨後,波士頓動力也官方闢謠稱這只是Corridor Digital製作的一段CGI。
Corridor Digital工作室旗下的Corridor Crew團隊,則負責做專門解讀各種大片特效和背後製作技術流程的“揭秘節目”,團隊成員會篩選一些電視劇和電影,並討論和分解其中的視覺特效鏡頭。
他們也曾經邀請過不少特效師和演員來節目中作客,觀察他們對各種特效的反應。
對於團隊製作的這檔AI動漫,有網友調侃:
不如下次就邀請動畫師們如何?看看他們對於這部AI動漫的反應。
那麼,你覺得AI做出來的這部動漫效果怎麼樣?
參考連結:
[1]//m.sbmmt.com/link/f3957fa3bea9138b3f54f0e18975a30c
#[2 ]//m.sbmmt.com/link/532435c44bec236b471a47a88d63513d
#[3]https://twitter.com/bilawalsidhu/status/16310432035154494#
以上是用AI把自己畫進動漫裡,3天攬獲150萬+播放量,職業動畫師:有被嚇到的詳細內容。更多資訊請關注PHP中文網其他相關文章!