大家好,我是刀哥。做過大廠研發(fā)、做過出海硬件,現(xiàn)在深耕 AI 動(dòng)畫、AI 漫劇。
上一篇咱們說到,我從Oii社群認(rèn)識(shí)了一位實(shí)拍轉(zhuǎn)型的導(dǎo)演,有AI漫劇可以試稿,我先是按照第一集,讓AI寫劇本,自我發(fā)揮做了一個(gè)續(xù)集,導(dǎo)演覺得ok,可以拿真實(shí)劇本試試。
等我想獨(dú)自按照章節(jié)完成一集的時(shí)候,天大的難題來了。以下是我一周燒光一萬積分的復(fù)盤,希望對(duì)大家有幫助。
在實(shí)際項(xiàng)目制作中,角色造型和場(chǎng)景的一致是第一步一、沒有思考的分鏡,就不可能是精品
我把場(chǎng)景和人物上傳到OiiOii上,雖然很快做出來了兩分鐘AI漫劇,但是專業(yè)人士一看,立馬指出十來個(gè)問題:
連著兩個(gè)鏡頭是同一個(gè)角度但背景變了,穿幫了
視覺上很跳,背景亂變,混亂,不像在同一個(gè)空間里發(fā)生的事
正反打鏡頭錯(cuò)亂
人物站位變了
所有人都離開大桌子跑前面對(duì)著鏡頭說話,非常奇怪。
我,汗流浹背了!
真實(shí)劇集沒有版權(quán),不方便給大家看,我拿瘋狂動(dòng)物城自己生成的三人室內(nèi)鏡頭舉例:
![]()
前一段時(shí)間很火的9宮格,分鏡大師方式制作,看起來很專業(yè),像是專業(yè)導(dǎo)演和攝影給的鏡頭:
![]()
看上去很專業(yè)是吧?細(xì)看呢?
背后海報(bào)變了,兔子警官坐的沙發(fā)變了,第7張直接變成了兩只兔子背影。
如果你真的讓他們說話,那就更是災(zāi)難,是的,他們會(huì)莫名其妙跑到鏡頭前說話,而不是坐在座位上!
劇本設(shè)定如下:
用nano2生圖,生成3個(gè)分鏡
1 兔子警官朱迪說:“我聽說牛局長(zhǎng)最近有個(gè)新愛好,
每天早上都要跳進(jìn)海里游一圈,說是為了保持身材。”
2 狐貍尼克說: “據(jù)說他最近在嘗試一種全新的生發(fā)劑,
目標(biāo)是讓他的頭頂重現(xiàn)昔日的光彩。”
3 花豹警官說:“哇哦,不過,我更關(guān)心的是我手里的這個(gè)甜甜圈,
這已經(jīng)是今天第三個(gè)了,味道好極了!””先看下Oii的效果:
![]()
人物位置變
警官跑到鏡頭前說話
都不幸被我言中!這已經(jīng)是各個(gè)AI動(dòng)畫智能體的致命缺點(diǎn)。
oii不能編輯首尾幀,導(dǎo)致無法精確控制視頻生成。所以盡管看上去Oii做了好多好多工作,又是設(shè)計(jì)角色三視圖,又是編劇,又是分鏡,又是音效,但,這都是無用功。。。
![]()
因?yàn)榛竟G了,場(chǎng)景一致性沒了。
嘗試了很多平臺(tái),未果。我總結(jié)下當(dāng)前AI動(dòng)畫智能體的五大缺點(diǎn):場(chǎng)景不一致、人物站位錯(cuò)亂、空間錯(cuò)亂、鏡頭跳躍、做不了正反打鏡頭。
二、多鏡頭敘事控制和鏡頭間連續(xù)性保持
而Flova的表現(xiàn),讓我看到了做精品漫劇的希望。網(wǎng)址:https://www.flova.ai/
它有非常專業(yè)的故事板,把制作過程分為:故事元素、分鏡首尾幀、分鏡視頻三大部分。
![]()
故事元素包含場(chǎng)景和人物,可以通過引用修改。
![]()
![]()
兩個(gè)skills則用到了sora2 、veo3.1的精髓:
Tail-to-Head Frame Connection ,解決了怎么把多個(gè)鏡頭拍成同一段現(xiàn)實(shí)。
Rich Multi-Shot Playthrough,自動(dòng)分鏡 + 自動(dòng)剪輯
![]()
看,我標(biāo)出的這個(gè)tail-to-head提示詞是不是讓創(chuàng)作者爽到飛起?關(guān)鍵是真的能實(shí)現(xiàn):
再對(duì)比一個(gè)一句話做視頻,無參考圖的創(chuàng)意腦洞,迪士尼IP變成王者榮耀英雄,開始對(duì)戰(zhàn):
十個(gè)酷似經(jīng)典IP但又不是的人物,穿越到王者榮耀地圖里,
變成王者榮耀的英雄造型,分成兩組對(duì)戰(zhàn)的故事。
高潮部分是打龍然后遭遇,然后大混戰(zhàn),每個(gè)人都展示技能,
有人血條沒了就死掉,然后在基地重生,逼真還原王者榮耀站東場(chǎng)面。
十個(gè)人物列表:
米老鼠(Mickey Mouse) – 迪士尼象征性吉祥物 The Verge
米妮(Minnie Mouse) – 與米老鼠一起的經(jīng)典搭檔 The Verge
愛麗兒(Ariel,《小美人魚》) – 經(jīng)典公主形象 The Verge
貝兒(Belle,《美女與野獸》) – 受歡迎的公主角色 The Verge
灰姑娘(Cinderella) – 迪士尼經(jīng)典童話主角 The Verge
辛巴(Simba,《獅子王》) – 動(dòng)畫電影代表角色 NBD
鋼鐵俠(Iron Man) – 漫威宇宙超級(jí)英雄 The Verge
美國(guó)隊(duì)長(zhǎng)(Captain America) – 漫威標(biāo)志性英雄 NBD
達(dá)斯·維達(dá)(Darth Vader) – 《星球大戰(zhàn)》最經(jīng)典反派 NBD尤達(dá)(Yoda,《星球大戰(zhàn)》) – 星戰(zhàn)宇宙的智慧象征
想法來源于Sora2和迪斯尼IP合作的新聞,我們先來?yè)屜润w驗(yàn)。
這是Oii做出來的打龍對(duì)戰(zhàn):
這是Flova做出來的,除了一些幻燈片,完成度相當(dāng)好:
我希望Oii再進(jìn)步一些!
而且很恐怖的是,F(xiàn)lova支持一次性上傳20張?jiān)瓐D,20MB左右的圖都傳,不做任何壓縮,相比oii的只支持一次7張圖,壓縮到KB級(jí),實(shí)在是太有畫質(zhì)誠(chéng)意了。
當(dāng)然,當(dāng)前的問題依然明顯突出:
1、圖片不壓縮,導(dǎo)致展示緩慢,經(jīng)常是需要魔法才能看到頁(yè)面。
2、沒有角色庫(kù),導(dǎo)致我每次新起項(xiàng)目,都要傳一遍角色圖。
3、依然無法一次性完美達(dá)成場(chǎng)景一致性。
4、兩個(gè)技能最終可能是由veo3.1和hailuo完成,完成度大打折扣。
但我真的很激動(dòng),做成精品漫劇的希望就在這里了!
想精確控制場(chǎng)景,控制臺(tái)詞,控制人物,必須是按Flova的方式來,發(fā)揮視頻模型最大能力,允許創(chuàng)作者去改首尾幀,去更換保持場(chǎng)景圖,去自動(dòng)連接這個(gè)分鏡的尾幀和下一個(gè)分鏡的首幀。
Flova=葫蘆娃,Oii=藕精。葫蘆娃大戰(zhàn)藕精,目前葫蘆娃領(lǐng)先。
我是Oii的忠實(shí)玩家,當(dāng)然希望Oii越來越好,AI漫劇現(xiàn)在這么火,希望Oii做好基本功建設(shè),壓榨好頂尖視頻模型的每一寸功能和殺手锏大招。
后記:
S 級(jí)漫劇真的只能手搓嗎?自動(dòng)生成的AI動(dòng)畫真的就是這么亂嗎?
我有了答案,我相信這些AI智能體視頻整合平臺(tái)也有自己的答案。
它們不應(yīng)該只是在下拉框多一個(gè)視頻模型而已,千篇一律一個(gè)用法,而應(yīng)該把每個(gè)模型用到極致。期待不遠(yuǎn)的幾個(gè)月能完美實(shí)現(xiàn)!
李導(dǎo)演約我這周試稿新漫劇,到底能不能變現(xiàn)成功,你們等我消息!
創(chuàng)作不易,
如果這篇對(duì)你有幫助,
求一鍵三連 ??
我們下期見!
我是刀哥,做過大廠、出海創(chuàng)業(yè),現(xiàn)在研究 AI 工具與 AI 制作。
關(guān)注我:帶你把 AI 用在能賺錢的地方。下期見!
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.