![]()
Cloudflare 發布“Markdown for Agents”,正式構建 AI 友好型互聯網底層
信息來源:The Cloudflare Blog / The Register / Cloudflare Radar
發布日期:2026年2月12日(最新進展)
摘要(約 300 字)
Cloudflare 正式推出名為“Markdown for Agents”的顛覆性功能,旨在解決 AI 智能體(AI Agents)抓取網頁信息時面臨的“HTML 冗余”難題。傳統 HTML 頁面包含大量用于渲染樣式的標簽和腳本,對 AI 模型而言極度浪費 Token 且干擾理解。
該技術利用HTTP 內容協商機制,當 AI 爬蟲(如 Claude Code、OpenCode)在請求頭中發送時,Cloudflare 邊緣網絡會自動攔截請求,實時將原始 HTML 轉換為精簡、結構化的 Markdown 格式返回。
Accept: text/markdown
核心價值與數據:
- Token 消耗銳減 80%: 實驗顯示,一個 16,180 Token 的復雜 HTML 頁面經轉換后僅需 3,150 Token。對于按 Token 計費的 AI 開發者而言,這直接降低了 80% 的推理與訓練成本。
- 邊緣實時處理: 轉換發生在離用戶最近的邊緣節點,無需修改網站后端代碼,且不影響普通用戶的 HTML 瀏覽體驗。
- 內容信號標記(Content Signals): 隨 Markdown 返回的還有 ai-train=yes 等信號,讓站長能精細化控制內容是否允許被 AI 訓練或搜索。
Cloudflare 此舉標志著互聯網正從“為人設計的 HTML 時代”向“為 AI 設計的 Markdown 時代”演進。
視角:為什么這事兒很重要?
Cloudflare 這次動作,其實是在做“給 AI 喂飯的標準化”:
- 從“防”變“疏”: 以前網站都在封殺 AI 爬蟲,現在 Cloudflare 告訴站長:與其被亂爬,不如我幫你把數據打包成 AI 最愛吃的“脫水干貨”(Markdown),既省帶寬又提高 AI 回答的準確率。
- 商業模式閉環: Cloudflare 正在利用其占全球 20% 流量的霸主地位,制定 AI 訪問的標準協議。未來,如果一個網站不支持這種 Markdown 轉換,可能在 AI 搜索(如 Perplexity 或 OpenAI Search)中的排名會大幅下降。
互聯網的“脫水”時刻:Cloudflare 正在重寫 AI 時代的協議底層
從“為人設計”到“為機器設計”
在過去的三十年里,互聯網是屬于人類視覺的。HTML(超文本標記語言)本質上是一張張花哨的“面皮”,填充了大量的廣告腳本、跟蹤代碼和冗余的 CSS 樣式。然而,隨著 AI 智能體(AI Agents)取代人類瀏覽器成為互聯網的第一大消耗者,這張“面皮”正在成為阻礙效率的垃圾堆。
近日,全球邊緣計算巨頭 Cloudflare 正式推出了“Markdown for Agents”協議。這看似只是一個格式轉換工具,實則拉開了互聯網“脫水運動”的序幕——它宣告了 HTML 霸權的終結,以及一個“語義優先”時代的到來。
一、 效率的“血稅”:被浪費在標簽里的 Token
在大模型時代,Token 是流動的金錢。一個典型的現代新聞網頁,其實際正文可能不到 1000 字,但其背后的 HTML 源碼往往高達 50KB 甚至 100KB。
當 AI 爬蟲(Agent)訪問這個網頁時,它被迫吞下了大量的
、和復雜的 JavaScript 邏輯。這導致了兩個致命問題:
- 成本高昂: 開發者需要為這些毫無意義的標簽支付 5 到 10 倍的 Token 費用。
- 幻覺風險: 冗余的側邊欄廣告、推薦位信息會混淆 AI 的長文本注意力,導致總結出現偏離。
Cloudflare 的介入極具殺傷力。它在邊緣節點(Edge)直接“脫水”,將臃腫的網頁實時壓縮為骨架分明的 Markdown。這意味著 AI 讀到的不再是“被裝修過的房子”,而是“房子的藍圖”。
二、 邏輯的重構:HTTP 內容協商的“第二次生命”
Cloudflare 并沒有發明新的協議,而是巧妙地復活了 HTTP 協議中塵封已久的“內容協商(Content Negotiation)”機制。
通過這一行簡單的請求頭,互聯網實現了“一屏兩制”:
Accept: text/markdown
- 肉眼端: 依然是精美的排版、流動的視頻和交互式按鈕。
- 靈魂端(AI): 只有純粹的標題、列表、引用和核心段落。
這種非侵入式的改造,讓數以億計的老舊網站無需修改一行后端代碼,就能一夜之間變成“AI 友好型”站點。
三、 權力重分配:站長、云巨頭與 AI 爬蟲的博弈
Cloudflare 此舉的深層野心在于定義 AI 時代的準入規則。
在過去的一年里,內容創作者與 AI 公司的矛盾幾近不可調和,Reddit、紐約時報紛紛封禁爬蟲。Cloudflare 提供了一個緩沖帶:“我可以給你 Markdown,但你必須遵守我的規則。”
通過集成的,站長可以精準控制:
AI-Policy-Engine
- 允許 AI 總結全文,但不允許 AI 將其用于模型訓練。
- 允許知名 AI(如 OpenAI、Anthropic)訪問,拒絕無名小爬蟲。
- 為 Markdown 內容添加數字水印,追蹤數據的流向。
四、 結語:互聯網正在變“薄”
今天,我們正在見證 AI 如何通過協議“消化”世界。
Cloudflare 的這次嘗試,本質上是在為互聯網安裝一個“數字濾網”。未來的互聯網將變得越來越“薄”——人類在厚重的視覺世界里社交、娛樂,而 AI 在極簡的語義世界里計算、決策。
當萬物皆可 Markdown,互聯網將不再是一個混亂的垃圾場,而是一本有條不紊、實時更新的巨型百科全書。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.