最近,一個(gè)視頻在推上傳瘋了。
一張美女照片,加上一條自己錄制的視頻,就能生成一張極其自然的換臉視頻,表情和動(dòng)作復(fù)刻的都很好。
而它用到的,就是阿里家的開源模型,Wan2.2 Animate。
其實(shí)Wan2.2 Animate一個(gè)月前杠發(fā)布的時(shí)候就火過一波,不知道你們對(duì)這個(gè)宅男變身女主播的視頻眼熟不,當(dāng)時(shí)我刷到了n次。
![]()
然后你會(huì)發(fā)現(xiàn),這次再火起來,流量密碼依然沒變。
搞顏色還是第一生產(chǎn)力。。。
但你們都知道,一個(gè)模型,它能搞顏色,不代表它只能搞顏色。
相反,很可能意味著它上限很高。。。
畢竟在座的各位都是老司機(jī),閱歷驚人,出來的效果如果哪里不自然,大概率一眼就看得出來。
至于效果,直接給大家看看,我用我自己的視頻加上不同角色的圖片,做出來的效果。
更復(fù)雜的表情,它也能復(fù)刻。
由于我自己確實(shí)是個(gè)不愛拍照的I人,表情沒那么豐富,這里借用聽泉老師代為出鏡一下。
再加上一個(gè)美女。
![]()
出來的效果是這樣的。表情模仿確實(shí)很到位,就是感覺高冷美女一下子變成東北銀了。

想得到更逼真的效果呢,還可以變聲線。
直接做一條聲音來替換就行,海螺+剪映就可以實(shí)現(xiàn)。
這樣就能同時(shí)替換形象和聲音了。
我用海螺做了聲音,出來的效果是這樣的。
你也很難想象這個(gè)視頻的背后是一個(gè)我這樣的糙老爺們對(duì)不對(duì)。
所以,不多說什么了,朋友們,網(wǎng)戀有風(fēng)險(xiǎn),奔現(xiàn)需謹(jǐn)慎。。。
萬幸的是,現(xiàn)在的Wan2.2 Animate還不能做到實(shí)時(shí)輸出,否則你想一下,假設(shè)以后郭老師,良子這些人也能當(dāng)顏值主播開直播了,那會(huì)是一個(gè)怎樣的世界。。。
當(dāng)然了,類似于這種在違法邊緣瘋狂大鵬展翅的事情,我不會(huì)干,而且我也,絕對(duì)絕對(duì),不希望任何人這么干。
不過話說回來,如果你的訴求就只是想給自己整一些小哥哥小姐姐的舞蹈視頻看,用它還是很方便的。
也可以拉一個(gè)你喜歡的角色來復(fù)刻跳舞,比mmd方便多了。
動(dòng)作表情啥的都挺到位的,但也有個(gè)問題,就是,一旦手部動(dòng)作多了,手指還是很容易崩壞。
這個(gè)問題目前比較無解,很難頂。
除了跳舞之外,還可以做一些影視二創(chuàng)。
比如,讓趙本山出演《了不起的蓋茨比》,還原小李子經(jīng)典鏡頭。
Welcome to 鄉(xiāng)村大舞臺(tái),有夢(mèng)你就來。
還有這個(gè)經(jīng)典的梗,接著奏樂接著舞,可以直接換了一個(gè)人來演。
當(dāng)然,我推薦這個(gè)模型的原因不只是因?yàn)樾Ч谩?/p>
類似的東西去年就有了,Runway,Viggle,都能實(shí)現(xiàn)。
但問題是,這些模型都不開源。
像Wan2.2 Animate這樣一直走在開源路上的,已經(jīng)不多了。。。
想玩這個(gè)模型,最簡單的方法就是去通義萬相官網(wǎng),網(wǎng)址在這里:
https://create.wan.video/
進(jìn)去之后在底部這里,找到數(shù)字人。
![]()
然后選擇角色替換或者動(dòng)作模仿,選擇專業(yè)模式輸出,再上傳參考圖和參考視頻,就OK了。
![]()
簡單說一下動(dòng)作模仿和角色替換的區(qū)別。
假設(shè)我們現(xiàn)在有一張參考圖A,主體為A,背景為A,一個(gè)參考視頻B,主體為B,背景為B。
動(dòng)作模仿就是,主體A在背景A里,做著主體B的動(dòng)作。
也就是讓參考圖動(dòng)起來,模仿視頻中的動(dòng)作和表情。
角色替換則是,主體A在背景B里,做主體B的動(dòng)作。
就是保留原視頻的背景環(huán)境,用參考圖中的角色替換視頻中的角色。
這里面還有一個(gè)小技巧,就是,如果想要達(dá)到開頭case那種只換臉不換背景的效果,可以多加一個(gè)流程:在視頻中截一幀,用這一幀圖和角色圖,在seedream或者nano banana上,生成一張和視頻中背景完全一致的圖,把這張圖作為生成視頻的參考圖。
舉個(gè)例子,這張拼圖的左邊,是我從視頻里截的一幀,右邊是我生成的用于替換我自己的角色圖。
![]()
然后我用即夢(mèng),生成了一張和視頻中背景一致的圖,長這樣。
![]()
最后把這張圖放進(jìn)去跑case,出來的就是一張,和原背景一模一樣的換臉視頻了。
![]()
有了這些輸入,你基本上就可以愉快地開始玩耍了。
如果你想進(jìn)行本地部署的話,Wan2.2 Animate也完全開源了:
https://github.com/Wan-Video/Wan2.2
![]()
目前也支持了ComfyUI。
從技術(shù)的角度看,Wan2.2 Animate的意義,絕對(duì)是積極的。
它把過去需要昂貴動(dòng)捕設(shè)備、專業(yè)動(dòng)畫師才能實(shí)現(xiàn)的表情和動(dòng)作捕捉,變成了一個(gè)普通人點(diǎn)幾下鼠標(biāo)就能完成的事情。
而且,是開源的。
這也意味著,真的可以進(jìn)入到企業(yè)、劇組里,進(jìn)行私有化部署,來做很多的實(shí)際效果。
這也意味著很多獨(dú)立動(dòng)畫師,可以用極低的成本,讓自己的角色活起來。
更意味著電影制作,可以在特效、數(shù)字替身、甚至虛擬演員這些領(lǐng)域,打開全新的想象空間。
要知道,專業(yè)動(dòng)捕真的很貴的。。。
而且,除了用Wan2.2 Animate來去做角色替換之外,還有一些其他的流程,也是很好玩的。
比如,我的好基友@GongWangG,在組里用Wan2.1-Vace,玩的實(shí)驗(yàn)小demo,Wan2.2 Animate不是做角色替換嘛,但用Wan2.1-Vace,也可以用來保持角色一致性,但更改掉整個(gè)背景做實(shí)拍合成VFX。
這種流程,也是非常酷的。
未來我們也許能看到已經(jīng)逝去的演員,在新電影里“復(fù)活”,用AI完美復(fù)刻他們的音容笑貌和表演風(fēng)格,也許也能看到很多經(jīng)典的場景被復(fù)刻出現(xiàn),而我們就在其中暢游。
這在技術(shù)上,已經(jīng)不再是科幻。
它降低了創(chuàng)作的門檻,解放了生產(chǎn)力。
但是。
凡事,就怕這個(gè)但是。
這些技術(shù),同樣可以,毫不費(fèi)力地,割開我們現(xiàn)實(shí)世界的信任基石。
就說一個(gè)最實(shí)際的。
你在網(wǎng)上看到一段視頻,某個(gè)公眾人物,說著極其出格的話,做著極其不齒的事,視頻看起來天衣無縫,沒有任何破綻,你信不信?
所以我說,我之前還猶豫了一下,要不要寫這篇文章。
但想了想,最后還是決定寫出來了。
我們理應(yīng)看見它的好,也看見它的壞。
技術(shù)永遠(yuǎn)是中立的。
它就像火,可以取暖,也可以焚城。
但真正重要的。
是那群握著火把的人。
我相信,我們還是一群。
用火取暖的人。
以上,既然看到這里了,如果覺得不錯(cuò),隨手點(diǎn)個(gè)贊、在看、轉(zhuǎn)發(fā)三連吧,如果想第一時(shí)間收到推送,也可以給我個(gè)星標(biāo)?~謝謝你看我的文章,我們,下次再見。
>/ 作者:卡茲克、水杉
>/ 投稿或爆料,請(qǐng)聯(lián)系郵箱:wzglyay@virxact.com
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.