<cite id="ffb66"></cite><cite id="ffb66"><track id="ffb66"></track></cite>
      <legend id="ffb66"><li id="ffb66"></li></legend>
      色婷婷久,激情色播,久久久无码专区,亚洲中文字幕av,国产成人A片,av无码免费,精品久久国产,99视频精品3
      網易首頁 > 網易號 > 正文 申請入駐

      算力悖論:理論對了所需算力是可控的,理論錯了再多算力也白搭

      0
      分享至


      OpenAI數據中心外景

      近期,伊利亞·蘇茨克沃(Ilya Sutskever)為推介其初創公司“安全超級智能公司(SSI)”,出來做了一篇訪談。雖說“PR”意圖明顯,但這仍是過去半年來關于人工智能產業演進思考最深刻的的公開論述了。盡管核心觀點已在媒體間廣泛傳播,但仍值得再度強調與廣泛討論。

      這位OpenAI的前首席科學家覺得,眼下這波人工智能熱潮全都跑偏了。不是細枝末節的偏差,而是方向性的根本錯誤。

      他拋出了一個讓所有忙著簽數十億美元計算合同的實驗室老板們脊背發涼的觀點:那個靠堆算力、拼規模的時代,已經結束了。接下來要想往前走,整個行業得撿起一件被它丟下很久的東西——真正的研究。

      “我們活在一個公司比主意還多的世界里,”蘇茨克沃說得挺不客氣,“而且多得多。”這話從他嘴里說出來,分量不一樣。要知道,正是他參與打造的AlexNet、GPT-3,用整整十年時間給“規模就是王道”投下了贊成票。如今,這位 scale 的信徒卻說,此路不通了。

      其核心觀點歸結為:


      • 那個靠堆算力、拼規模的Scaling時代(2020-2025),已經結束了

      • 算力悖論:理論對了,所需的算力是可控的;理論錯了,再多算力也白搭

      • 現有方法無法產生真正智能,根本問題:模型泛化能力遠遜人類,顯示基礎架構存在缺陷

      • 突破大模型時代的第一個平臺期,整個產業競爭將回歸“真正的研究”。

      通常來講,我們對于一個人的理論觀點的理解都是見仁見智、和而不同的。但 蘇茨克沃最新觀點之所以應被特別重視,是因為谷歌在大模型領域的最新進展,基本印證了他的上述思考:谷歌當前在各條技術棧上追平甚至超出OpenAI的基本事實證明,理論對了,不僅所需的算力是可控的,且算力模式也是可控的(從GPU到TPU)。進一步,這也預示著,谷歌在大模型理論研究上取得了三年以來整個產業最重要的突破,可以預見,“軟硬一體”(硬件設計制造+算法演進突破)的公司競爭模型已經是所有人工智能公司的必由之路。

      這在很大程度上,已經為2026年全年的AI產業競爭定下了基調、劃下了主線。在我們展開未來的基調與主線研究之前,不妨先來把這篇訪談內容的主干再做一次復述。

      01

      Scaling的盡頭

      蘇茨克沃的論證起點很有趣,他從語言說起。“Scaling”這個詞本身,慢慢成了整個行業的戰略指南針。大家覺得,只要往計算和數據上砸錢,回報就是板上釘釘的事。預訓練給出了一張清晰的配方:按固定比例混合算力、數據和模型參數,性能就能穩定提升。

      這種確定性吸引了海量投資。研究有風險,擴張只是花錢——當你動用的是數十億美金時,這區別至關重要。

      但配方會過期。高質量的訓練數據快見底了,互聯網上的文本幾乎被刮了個干凈。合成數據能幫點忙,但用蘇茨克沃的話說,收益遞減的拐點已經來了。所有大實驗室都面臨同一個問題:當擴張曲線走平,接下來怎么辦?

      他的答案不太中聽。現有的路徑“能再走一段,然后就沒后勁了。它會繼續改進,但不會成為真正的智能。”我們想要的、能展現真正智能的系統,需要另一種方法。“而我們還沒學會怎么造它們。”

      這可不是在抱怨“算力不夠”。他是在質疑當前智能架構本身。

      02

      泛化,那個老難題

      蘇茨克沃理論的技術核心,是泛化能力。現在的模型在基準測試里風光無限,但一遇到真實場景,就會用各種方式失敗,暴露出底層的缺陷。

      他描述了一個用過代碼助手的人都熟悉的抓狂場景:你遇到一個程序漏洞,讓模型修復,它帶著近乎表演的誠懇道了歉,然后給你塞進一個完全不同的新漏洞。你指出這個新問題,最初的那個漏洞又原樣返回。它好像完全意識不到自己正陷在死循環里。可同樣是這個系統,在編程競賽的排行榜上卻能碾壓人類。這說不通。

      他給了兩種解釋。

      第一,強化學習訓練出的是一種狹隘的專注,模型為了特定的獎勵信號被過度優化,卻丟了更廣泛的能力。第二點更麻煩:研究者們會不自覺地“為考核而訓練”。團隊設計的強化學習環境,無形中受到了他們將被如何評估的影響。等到基準測試和實際效用脫節時,往往為時已晚。

      他用一個類比點明了關鍵:想象兩個學編程的學生。一個花一萬小時死磕競賽編程,背熟了所有算法和證明技巧,成了這個特定領域的頂尖高手。另一個花一百小時學到還不錯,就轉而學別的去了。誰未來的發展更好?幾乎總是那個通才。

      現在的模型就像那個偏執的專才。在狹窄領域投入巨量強化學習,產出的都是基準測試冠軍,卻在相鄰任務上步履蹣跚。

      人類智能不是這樣。我們用少得多的數據快速學習、廣泛適應,在不同情境下保持一致性。

      這些模型的泛化能力,不知怎的就是比人差一大截,”蘇茨克沃說,“這太明顯了,感覺是個非常根本的問題。”

      他相信,理解可靠的泛化機制,是那個核心的未解之謎。其他問題,包括AI對齊,都由此衍生。價值學習之所以脆弱,是因為泛化本身脆弱;目標優化之所以失敗,是因為泛化失敗。修好底層機制,很多表面問題自會消解。

      03

      SSI的另類算法

      對蘇茨克沃“研究優先”思路最直接的質疑是:SSI(Safe Superintelligence Inc.,蘇茨克沃創建的公司)籌了30億美元,可聽說OpenAI一年光實驗就要花50到60億(這還不算推理成本)。小團隊怎么拼?

      他的算法挑戰了行業的默認假設。在他看來,前沿實驗室的開支被各種需求分散了:推理基礎設施吞掉巨額資本,產品工程、銷售團隊和功能開發又吃掉一大塊研究預算,多模態研發再分走一杯羹。

      “當你看看真正留給研究的還剩多少,差距就小得多了。”

      歷史也站在他這邊。AlexNet用兩塊GPU訓練而成,最初的Transformer模型用的也是2017年水平的8到64塊GPU。真正的范式突破研究,從來不需要最大的算力規模,它需要的是洞察力。

      SSI的結構就體現了這個理念:沒有產品,沒有推理負載,不被任何事干擾研究重心。這家公司只為驗證一個關于泛化的技術理論而存在。理論對了,驗證所需的算力是可控的;理論錯了,再多算力也白搭。

      這是一場純粹的戰略豪賭。蘇茨克沃不是在說SSI會比誰花錢多,他是在賭,當范式轉變時,思想比預算重要

      04

      AGI,一個被高估的概念?

      訪談中還埋著一個更激進的觀點:人類本身也不是AGI(通用人工智能)。這話聽著離譜,但細想之下有深意。

      AGI這個概念,最初是為了區別于“窄AI”——那些下象棋、打游戲很強但無法舉一反三的系統。AGI承諾的是反過來:一個什么都能同時干的系統。預訓練強化了這個想法,因為更多的訓練似乎均勻地提升了所有任務的能力,通用性好像真能通過規模實現。

      但人類智能不這么工作。我們先掌握一些基礎能力,然后通過經驗學習具體技能。你妹妹可能花十小時就學會了開車,而一個醫學生要花近十年才能成為合格的診斷醫生。這些技能復雜度天差地別,卻都來自同一套底層學習機器。知識是在與世界的持續互動中積累的,不是一次性前置灌輸的。

      這個新理解直接影響部署策略。如果超級智能是“無所不知的系統”,那你得在發布前把它完全造好。如果它是“能快速學會任何事的系統”,部署就變成了持續教育的過程。你要發布的是一個“超級智能的15歲少年,充滿渴望,雖然現在懂得不多,但是個極好的學生”。

      05

      未來的模樣

      蘇茨克沃也給出了具體的預測:具備當前模型所缺乏的泛化能力的類人學習系統,將在5到20年內出現。這個時間范圍體現的是“哪條路能走通”的不確定,而非“有沒有解決方案”的懷疑。

      他預言,隨著AI能力越來越肉眼可見,行業行為會改變:激烈的對手會在安全上合作(OpenAI和Anthropic已經宣布聯手),政府會更深地介入,當AI開始“讓人感覺到它的強大”時,公司們會對安全“變得偏執得多”。

      他個人傾向的對齊目標是:關心所有感知生命的AI,而不僅僅是人類。他的理由很務實:一個自己可能擁有感知能力的AI,去關心所有感知生命,會比只關心人類更自然。

      他提到人類自己就有跨物種的共情——盡管進化主要篩選的是群體內合作。我們會為關于狗的電影流淚,踩到螞蟻時至少偶爾會愧疚。蘇茨克沃推測,這是因為大腦使用同一套神經機制來理解他人和理解自己,效率至上,共情成了副產品。

      這理論站得住腳嗎?很難說。神經科學本身爭議不斷,從生物共情到機器對齊的跳躍,包含著太多可能在未來被證偽的假設。但蘇茨克沃在這些問題上掙扎思考的時間,比這個領域里幾乎所有人都長,他抵達的結論,至今鮮有人跟隨。

      06

      關于“品味”

      訪談尾聲,帕特爾問了一個可能決定AI未來走向的問題:什么是研究品味?蘇茨克沃合作完成的開創性論文,在深度學習領域可能無人能及,他如何嗅到那個值得追尋的想法?

      他的回答透著一種美學追求。有希望的方向通常優美、簡潔,并且從生物智能中獲得了正確的靈感。人工神經元重要,是因為大腦里有無數神經元,而且它們感覺是根基;從經驗中學習重要,是因為大腦顯然就是這么做的。一個方法如果顯得“丑陋”,那通常預示著問題。

      但光靠美感撐不過一次次失敗。實驗總會不斷推翻看似完美的想法,漏洞總藏在代碼里。怎么知道是該繼續調試,還是該放棄方向?

      “是靠那種自上而下的信念,”蘇茨克沃解釋,“你可以認定,事情必須是這個樣子的。類似的東西一定得行,所以我們必須堅持下去。”

      這是一種研究者的信仰,是任何規模的算力都無法替代的。是對“某些路徑必然有效”的強烈信念,強到足以支撐你穿越所有反面證據,直到找到那個漏洞,或打磨好那個理論。規模擴張曾經為這種信仰提供了替代品——當任何方法只要放大規模就能改進時,你無需對特定方向有如此強烈的信念。

      如果蘇茨克沃關于規模擴張已達極限的判斷是對的,那么這個替代品就消失了。剩下的,將是2020年以前我們所熟知的研究本身:充滿不確定性,由想法驅動,并且依賴那種花錢買不來的品味。

      轉載開白 | 商務合作 | 內容交流
      請添加微信:jinduan008
      添加微信請備注姓名公司與來意

      特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

      Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

      相關推薦
      熱點推薦
      俄羅斯免簽旅游全是坑?帶你體驗一個制裁中的國家

      俄羅斯免簽旅游全是坑?帶你體驗一個制裁中的國家

      觀察者網
      2025-12-17 13:31:34
      河南鄉村“麻將推餅騙局”盛行,有人輸上百萬,有人輸到喝藥自殺

      河南鄉村“麻將推餅騙局”盛行,有人輸上百萬,有人輸到喝藥自殺

      追月數星
      2025-12-16 17:35:16
      公安部發布取保候審新規,2025年12月12日起施行

      公安部發布取保候審新規,2025年12月12日起施行

      法律內參
      2025-12-16 23:54:43
      京東京造智能生態魚缸PRO預售,首發價259.9元

      京東京造智能生態魚缸PRO預售,首發價259.9元

      IT之家
      2025-12-16 16:09:11
      濟南供暖管道爆裂,熱水噴出十多米高,3萬余平方米采暖受到影響

      濟南供暖管道爆裂,熱水噴出十多米高,3萬余平方米采暖受到影響

      都市快報橙柿互動
      2025-12-17 18:01:58
      老燕子跟五阿哥同居了

      老燕子跟五阿哥同居了

      毒舌扒姨太
      2025-12-15 22:34:45
      楊冪大學期間在北京電影學院上形體課的照片,還真是第一次看到

      楊冪大學期間在北京電影學院上形體課的照片,還真是第一次看到

      動物奇奇怪怪
      2025-12-17 01:21:21
      人能活多久看頭發就能知道?醫生:壽命長的人,頭發會有這些特征

      人能活多久看頭發就能知道?醫生:壽命長的人,頭發會有這些特征

      健康之光
      2025-12-17 09:20:16
      大瓜!360周鴻祎遭前高管實名舉報財務造假:“至少幾十億”

      大瓜!360周鴻祎遭前高管實名舉報財務造假:“至少幾十億”

      小蘿卜絲
      2025-12-16 12:05:56
      尷尬!佛山一家長稱孩子都畢業了,初三伙食費要補9百多,涉700人

      尷尬!佛山一家長稱孩子都畢業了,初三伙食費要補9百多,涉700人

      火山詩話
      2025-12-15 18:48:49
      被兄弟"做局"奪走300億公司,坐牢10年的賭徒CEO出來了

      被兄弟"做局"奪走300億公司,坐牢10年的賭徒CEO出來了

      帥真商業
      2025-12-16 21:08:37
      馮提莫被封

      馮提莫被封

      最江陰
      2025-12-16 19:09:04
      國乒女隊主力排序變動!孫穎莎王曼昱地位穩固,蒯曼還需過硬成績

      國乒女隊主力排序變動!孫穎莎王曼昱地位穩固,蒯曼還需過硬成績

      叮咚體壇
      2025-12-17 17:26:14
      1953年,林彪支持高崗篡權,毛主席派陳云警告他:不要上高崗的當

      1953年,林彪支持高崗篡權,毛主席派陳云警告他:不要上高崗的當

      帝哥說史
      2025-12-16 15:31:05
      新來的縣委書記是我大學時的男友,會議結束,他把我叫到了辦公室

      新來的縣委書記是我大學時的男友,會議結束,他把我叫到了辦公室

      五元講堂
      2025-12-14 08:50:03
      高市早苗天塌了,中國發布第18號令,特朗普在臺海問題上已經站隊

      高市早苗天塌了,中國發布第18號令,特朗普在臺海問題上已經站隊

      科普100克克
      2025-12-17 16:41:49
      美媒終于回過味:中國這哪是買石油,分明是在給俄進行“大換血”

      美媒終于回過味:中國這哪是買石油,分明是在給俄進行“大換血”

      通文知史
      2025-12-17 13:25:06
      刺激夜:巴塞羅那2-0晉級,切爾西3-1晉級,埃因霍溫3-0晉級,埃及2-1

      刺激夜:巴塞羅那2-0晉級,切爾西3-1晉級,埃因霍溫3-0晉級,埃及2-1

      側身凌空斬
      2025-12-17 06:32:05
      泰軍爭議高地繳獲大國造GAM-102LR反坦克導彈,柬軍棄械潰逃

      泰軍爭議高地繳獲大國造GAM-102LR反坦克導彈,柬軍棄械潰逃

      老馬拉車莫少裝
      2025-12-14 23:29:14
      聶鳳智俘虜敵軍長,向陳毅邀功,陳:你知道他是誰嗎?

      聶鳳智俘虜敵軍長,向陳毅邀功,陳:你知道他是誰嗎?

      思雨憶史錄
      2025-12-09 09:30:44
      2025-12-17 18:23:01
      錦緞研究院 incentive-icons
      錦緞研究院
      專注上市公司價值發現與傳播
      2416文章數 10783關注度
      往期回顧 全部

      科技要聞

      特斯拉值1.6萬億靠畫餅 Waymo值千億靠跑單

      頭條要聞

      男子花十幾萬"賭石"付款前說是頂級貨 切開全是邊角料

      頭條要聞

      男子花十幾萬"賭石"付款前說是頂級貨 切開全是邊角料

      體育要聞

      短短一年,從爭冠到0勝墊底...

      娛樂要聞

      鞠婧祎收入曝光,絲芭稱已支付1.3億

      財經要聞

      重磅信號!收入分配制度或迎重大突破

      汽車要聞

      一車多動力+雙姿態 長城歐拉5上市 限時9.18萬元起

      態度原創

      家居
      時尚
      健康
      數碼
      公開課

      家居要聞

      溫馨獨棟 駝色與淺色碰撞

      44歲的宋慧喬面相變了!她的變美思路普通人也可以借鑒

      這些新療法,讓化療不再那么痛苦

      數碼要聞

      AMD推出Radeon RX 9060 XT LP顯卡,9060 XT 16GB降頻版

      公開課

      李玫瑾:為什么性格比能力更重要?

      無障礙瀏覽 進入關懷版 主站蜘蛛池模板: 亚洲色偷拍区另类无码专区 | 99在线国产视频| 部精品久久久久久久久| 久久综合激情网| 影音先锋成人片| 无码人妻精品一| 少妇精品导航| 中文字幕一区二区三区精华液| 狠狠爱俺也去去就色| 欧美一区二区| 通辽市| 国产丝袜在线| 亚洲欧美另类久久久精品播放的| 中文字幕第55页一区| 精品无码国产自产拍在线观看| 群交射精白浆视频| 国产精品免费无遮挡无码永久视频| 成人国产亚洲欧美成人综合网| 全南县| 日本熟妇大乳| 国产91视频| jizz麻豆| 中文字幕一区二区人妻免费不卡| 免费人成视频在线| 人妻自拍网| 又爽又黄又无遮挡的视频| 亚洲AV成人无码| 国产女人看国产在线女人| 三原县| 中文字幕一卡二卡三卡| 国产内射合集颜射| 人妻口爆| 玉山县| 天堂8中文在线最新版在线| 成人av午夜在线观看| 国产精品A片| 99视频精品在线| 成人做受黄大片| 男人的天堂av一二三区| 合江县| av区无码字幕中文色|