導(dǎo)讀:3D大模型時(shí)代,除了Meshy AI、TRIPO這些創(chuàng)業(yè)公司紛紛崛起之外,像騰訊混元3D大模型、字節(jié)跳動(dòng)Seed3D等移動(dòng)互聯(lián)網(wǎng)巨頭也紛紛介入,現(xiàn)在國外移動(dòng)互聯(lián)網(wǎng)巨頭也開始推出相關(guān)產(chǎn)品。
2025年11月28日,南極熊獲悉,Meta公司(原名Facebook)近日發(fā)布了新一代影像理解模型SAM 3(Segment Anything Model 3),并同步推出面向三維場(chǎng)景的SAM 3D。這一突破將原本專注于二維圖像分割的技術(shù),擴(kuò)展至物體檢測(cè)、視頻追蹤及三維重建領(lǐng)域,顯著提升了人工智能對(duì)二維與三維數(shù)據(jù)的處理與分析能力。
![]()
提升2D圖像編輯與對(duì)象識(shí)別
SAM 3模型繼承并超越了它的前身SAM,通過結(jié)合自然語言處理,大幅提升了對(duì)圖像和視頻中物體的檢測(cè)、分割及編輯能力。最顯著的進(jìn)展是通過自然語言指令,實(shí)現(xiàn)更精確的目標(biāo)識(shí)別和編輯操作。例如,用戶可以僅通過簡(jiǎn)單的語言描述,指令SAM 3 “將藍(lán)色襯衫換成紅色襯衫”,模型便能精準(zhǔn)識(shí)別并實(shí)現(xiàn)這一變更。此外,SAM 3也支持更復(fù)雜的命令,如“選擇坐著且沒有戴紅帽子的人”,表現(xiàn)出極強(qiáng)的靈活性與精準(zhǔn)度。
![]()
△采用自然語言,命令SAM 3模型“將藍(lán)色襯衫換成紅色襯衫”
該模型的精度和靈活性遠(yuǎn)超之前版本,特別是在處理細(xì)節(jié)豐富的圖像時(shí),SAM 3具備更強(qiáng)的物體追蹤和編輯能力,適用于圖像修飾、視頻剪輯以及創(chuàng)意內(nèi)容制作。Meta公司正在通過AI視頻工具“Edits”測(cè)試這一技術(shù),并計(jì)劃將這技術(shù)應(yīng)用于類似TikTok的短視頻平臺(tái)Vibes,為創(chuàng)作者提供強(qiáng)大的物體追蹤與編輯功能。

△SAM 3通過自然語言提示,顯著提高了對(duì)圖像和視頻中對(duì)象的檢測(cè)、分割和編輯能力
SAM 3D:從2D到3D的躍升
在SAM 3的基礎(chǔ)上,Meta推出了SAM 3D模型,它將單張圖片轉(zhuǎn)換為細(xì)節(jié)豐富、逼真的3D 模型,賦能虛擬現(xiàn)實(shí)(VR)、增強(qiáng)現(xiàn)實(shí)(AR)、機(jī)器人技術(shù)和數(shù)字設(shè)計(jì)等多個(gè)行業(yè)。SAM 3D 具有兩個(gè)不同的應(yīng)用模型:
![]()
△SAM 3D Body
SAM 3D Objects:專注于將日常物品(如家具、工具、室內(nèi)場(chǎng)景等)重建為3D模型。用戶只需上傳一張圖片,SAM 3D Objects就能自動(dòng)推斷物體的深度、形狀和結(jié)構(gòu),生成精準(zhǔn)的三維模型,應(yīng)用于產(chǎn)品設(shè)計(jì)、室內(nèi)設(shè)計(jì)等領(lǐng)域。
SAM 3D Body:專門用于重建人體,能夠通過單張圖片估算人體體型、姿勢(shì)及比例,生成完整的三維人體模型。這一技術(shù)對(duì)于運(yùn)動(dòng)分析、虛擬形象創(chuàng)建、動(dòng)畫制作等具有重要的應(yīng)用價(jià)值。用戶可以通過SAM 3D調(diào)整視角或相機(jī)角度,實(shí)現(xiàn)全方位的三維展示。

也就是說,即使你輸入一張普通的自拍或隨機(jī)圖片,它也能嘗試輸出完整的3D重建模型,可用于動(dòng)畫、運(yùn)動(dòng)分析、虛擬形象創(chuàng)建和其它數(shù)字應(yīng)用。此外,SAM 3D還允許你調(diào)整相機(jī)角度或改變整個(gè)場(chǎng)景的視角。
SAM 3D的推出,不僅推動(dòng)了虛擬現(xiàn)實(shí)與動(dòng)畫制作的發(fā)展,也為個(gè)性化3D打印打開了新的可能性。用戶僅憑一張日常照片,即可生成高精度、可編輯的三維模型,極大降低了3D打印模型創(chuàng)作的門檻。無論是定制化飾品、玩具,還是個(gè)性化人體模型,這種類型的AI工具都能快速生成適配3D打印的立體文件,推動(dòng)“從圖像到實(shí)物”的創(chuàng)意閉環(huán)走向普及。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.