Seedance2.0首波用戶體驗：兩張照片生成逼真電影感大片，知名導演“驚掉下巴”

智東西
作者 王涵
編輯 冰倩

智東西2月10日報道，字節(jié)跳動AI視頻模型Seedance2.0，自2月7日開啟灰度測試以來討論熱度不減。

連國際知名投資機構a16z的合伙人Justine Moore用Seedance2.0制作出了一段奧運會女子平衡木決賽的鏡頭，并感嘆說：“我們剛剛通過了AI視頻模型的圖靈測試。Seedance2.0簡直不可思議。”

▲Justine Moore體驗帖（來源：X）

區(qū)塊鏈及數字資產交易公司Binance聯合創(chuàng)始人兼首席客戶服務官Yi He發(fā)推說，Seedance2.0發(fā)出后，有朋友制作了有她肖像的短劇視頻，并要借此開展一個“六大門派圍攻光明頂”的AI自制短劇比賽。

▲Yi He發(fā)帖（來源：X）

與光同弛AI創(chuàng)始人、導演劉馳在小紅書上發(fā)布了其Seedance2.0的體驗感受，她說她只用了兩張場景圖和一張本人的照片，就做出了電影感極強的視頻片段，“全程被驚掉下巴”。

▲導演體驗帖子（來源：小紅書）

小紅書AI產品體驗博主摸魚小李發(fā)帖稱其在1小時內做出了9條可以直接用的TVC。

▲小紅書博主發(fā)帖（來源：小紅書）

一位學習了7年數字電影制作的網友在體驗后說，這個模型（Seedance2.0）是唯一一個讓他感到害怕的模型，電影行業(yè)的所有崗位幾乎都要消失了。90%他所學習到的技能，Seedance2.0都能實現。

▲數字電影制作學習者評論（來源：X）

游戲科學創(chuàng)始人兼CEO、《黑神話·悟空》制作人馮驥在體驗了Seedance2.0后還專門發(fā)了微博，稱贊該模型為“當前地表最強的視頻生成模型。”并且很慶幸今天的Seedance2.0來自中國。但他也從其中看出了假視頻泛濫與信任危機，因為“逼真的視頻將變得毫無門檻。”

▲馮驥微博（來源：新浪微博）

但是Seedance2.0也并不完美，在字節(jié)Seedance團隊發(fā)出的飛書文檔《Seedance2.0使用手冊》中，有用戶在評論區(qū)中反映，使用同樣的提示詞和素材，生成的視頻在精細化控制上卻不太行。

▲飛書文檔用戶評論（來源：飛書）

并且在一個官方案例中，Seedance2.0生成視頻的中文字幕還是會出現老生常談的中文亂碼情況。

▲官方案例錯誤（來源：飛書）

Seedance2.0在物理規(guī)律、動作表現和指令理解等核心能力上較上一代模型有所提升，支持混合輸入文本、圖片、視頻和音頻等至多15個參考素材，用戶通過自然語言指令即可控制視頻的生成。

它不僅能復刻參考素材的構圖、細節(jié)等，可以實現鏡頭規(guī)劃和特效，還支持視頻的平滑延長、鏡頭銜接以及角色替換等編輯功能，不過目前為保護隱私，暫不支持處理真實人臉素材。

智東西第一時間體驗了Seedance2.0，Seedance2.0所生成的視頻的場景和人物的一致性較高，模型可以主動添加運鏡和剪輯，但偶爾會出現“憑空出現”等破綻。（“強到可怕！”字節(jié)Seedance2.0灰度測試爆火，黑悟空老板：AIGC的童年結束了）

體驗地址：

https://jimeng.jianying.com/ai-tool/home

一、“發(fā)朋友圈90%的人都認不出是AI”，從寫腳本到出片不到三個小時

自2月7日開放測試以來，有很多網友們都親自動手體驗了Seedance2.0模型。

小紅書AIGC博主明義發(fā)布了一個由Seedance2.0生成的視頻短片，時長1分鐘。短片中兩個長相相同的的女孩子對向而坐，穿黑色西裝的女孩化了精致的妝，語氣咄咄逼人。另一個女孩則面色憔悴，透露著害怕的情緒。Seedance2.0很精準地分辨出了兩個女生不同的氣質、情緒和語氣，明義補充說這則短片從寫腳本到生成不到三個小時。

接著，明義直接用Seedance2.0生成了一個自己”出鏡“介紹上一段視頻制作過程的視頻，并附上了提示詞。網友們乍一看還以為是博主真人出鏡，但明義在評論區(qū)中回復稱，其實連素材都是AI生成的。

播客“三五環(huán)”和“半拿鐵”的主持人劉飛也在小紅書上發(fā)布了他用Seedance2.0生成的短劇，劇情為男孩用山東省公務員錄取通知回擊女朋友父親。

視頻中”父親“的前后神情和動作都很自然，公務員錄取通知文件上面的字也生成準確，沒有亂碼。劉飛感嘆稱，Seedance2.0簡直是“短劇殺手”。

▲劉飛制作短劇片段（來源：小紅書）

微博上，汽車博主滑布李用朋友家的貓咪照片作為首尾幀，分別用視頻模型3.5 Pro和Seedance 2.0生成了兩段貓咪后空翻的視頻。

對比效果顯示，老版視頻模型3.5 Pro所生成的視頻丟失了后空翻細節(jié)，沒有分鏡，睡覺部分貓咪出現穿幫，人類配音也很生硬。

▲視頻模型3.5 Pro生成效果（來源：微博）

而Seedance 2.0生成的視頻中，有兩段貓咪后空翻的鏡頭，且貓咪在空中翻轉、落地的身體形態(tài)都沒有發(fā)生畸變，Seedance 2.0還根據貓咪的習性，添加了貓咪蹭沙發(fā)的鏡頭，讓視頻更加自然、真實。

滑布李評價Seedance 2.0生成的視頻是“發(fā)朋友圈90%的人都認不出是AI的程度”。

▲Seedance 2.0生成效果（來源：微博）

AIGC創(chuàng)作者DynamicWang用Seedance2.0制作了一個模仿Nike品牌廣告風格的短片，短片中共出現了四位不同族裔的女性，每一位角色的身材和肌肉線條都很符合其所進行的運動的標準，且鏡頭角度變動后，角色的臉部特征依舊保持一致。

短片中的運鏡也十分自然，沒有拼接痕跡，慢動作、角度移動的位置都很準確，符合劇情需要。

從第一位體操女孩流暢的翻轉跳躍可以看到，Seedance2.0直接攻破了“AI生成不了體操視頻”這個難題。拳擊女生和跑步女生的汗水以及游泳女生濺起的水花，都沒有了此前AI生成的“黏膩感”。

▲DynamicWang制作視頻

自媒體博主冰河用Lovart的Skill生成分鏡故事板，直接復制到Seedance2.0中，他說該模型所生成的視頻比他用ComfyUI做的還細致。

▲自媒體博主冰河制作視頻片段（來源：X）

在小云雀App中，也有不少用戶都上傳了自己用Seedance2.0生成的視頻片段。

有李小龍對戰(zhàn)日本武士：

▲用戶體驗案例（來源：小云雀App）

真人版七龍珠：

▲用戶體驗案例（來源：小云雀App）

還有仙俠竹林對決：

▲用戶體驗案例（來源：小云雀App）

二、智東西體驗：能自動添加運鏡，但仍有憑空出現破綻

智東西上手體驗了Seedance2.0模型，主要考察模型的自運鏡、角色場景一致性和角色替換方面的能力。

Seedance2.0所生成的視頻畫風、場景和人物的一致性較高，不會發(fā)生畸變現象。模型可以根據其自己對劇情的理解添加運鏡和剪輯，聲效上也可以實現提示詞和參考素材的要求。但其所生成的視頻還是會偶爾出現“憑空出現”等破綻。

在設置界面，用戶可以自行選擇所生成視頻的比例和時長。Seedance2.0提供中文和英文兩種語言，用戶還可以選擇普通話、東北話、河南話、港臺腔、陜西話、粵語和四川話等不同的方言，視頻風格、人物形象、音色風格和視頻情緒都可以自由選用。

首先我們來試試Seedance2.0在廣告片生成上的表現。我們上傳了一張可口可樂蜜桃味的海報，輸入提示詞：

【@圖1】中的可口可樂飲料，360度高速旋轉2圈后，突然停住蓄力分裂成了3個部分進行展示。隨后分解后的可口可樂飲料罐的上中下三部分快速向內旋轉合成，一罐完整的可口可樂飲料，3D渲染產品展示特效，動感產品特效展示。

Seedance2.0生成的視頻如下：

▲可口可樂廣告片（來源：智東西體驗）

Seedance2.0所生成的廣告片基本符合提示詞要求，視頻中的可樂罐與素材幾乎絲毫不差。但仔細看，視頻還是可以看出破綻，比如這一幀有一部分瓶身憑空出現。

▲出現破綻

接下來，我們來試試該模型生成數字人的效果。由于平臺合規(guī)要求，Seedance2.0目前暫不支持上傳包含寫實真人臉部的素材，圖片和視頻素材均不行。

我們不提供素材，僅輸入提示詞：

特寫，焦距50mm，扎馬尾的女生坐在窗邊，微笑時有梨渦，在咖啡廳的桌面上的筆記本上寫著什么，偶爾有思考的停頓，背景虛化呈現，咖啡館的木質桌沿，柔光打在面部，突出輕松的氛圍，咖啡廳中放著鋼琴曲。

Seedance2.0生成的視頻如下：

▲咖啡廳女孩生成片段（來源：智東西體驗）

在生成速度上，Seedance2.0生成一段10秒的視頻需要5分鐘左右。從視頻的畫面上來看，在提示詞沒有說如何運鏡的情況下，該模型自動在開頭加了一個漸進的運鏡，讓畫面劇情更加自然和流暢。在漸進的過程中，畫面中的人物、場景都沒有發(fā)生畸變，保持了一致性。

最近，一個韓國AI小狗接受采訪的視頻非常火，我們將視頻截圖發(fā)給Seedance2.0，讓它將原圖中的小狗換成小貓。

▲AI小狗視頻截圖（來源：小紅書）

可以看到，Seedance2.0生成的視頻很完整地保留了參考素材的風格，給小貓穿上了睡衣，并且讓小貓雙手張開，并不是簡單地換頭，小三花貓沒有被睡衣覆蓋的肚子部分也還原了真實小貓崽肚子的質感。

而且，在音頻上，Seedance2.0也準確地實現了提示詞中所說的25歲女記者和小孩的聲線。

▲AI小貓生成片段（來源：智東西體驗）

結語：Seedance2.0體驗熱情依舊高漲，創(chuàng)意的重要性日漸顯現

從周末的灰度測試到今天的正式發(fā)布，網絡上有關Seedance2.0的討論話題逐漸從其所生成視頻的驚艷效果，逐漸轉為對影視行業(yè)下一步該怎么走的思考。

即使Seedance2.0目前所生成的視頻還是會有一些小破綻，徹底改變影視界還言之過早，但Seedance2.0的出現，無疑降低了專業(yè)表達的門檻，讓更多人有工具可以將想法可視化。

簡單來說就是，做視頻的門檻，變低了。以往需要一個視頻團隊所做的工作，如今一個人一臺電腦或一部手機就可以完成。

而這時，創(chuàng)意就成了AI時代的重中之重。