【精選】基于AI的智能融媒平臺構(gòu)建與實踐

本文精選自《廣播與電視技術(shù)》2025第11期，閱讀原文請訪問“廣電獵酷”小程序“期刊在線”。

近年來，隨著人工智能與大數(shù)據(jù)的快速發(fā)展及其在傳媒行業(yè)的廣泛應(yīng)用，常州廣播電視臺順應(yīng)技術(shù)趨勢，啟動了“AI驅(qū)動多模態(tài)”融媒大數(shù)據(jù)服務(wù)項目。該項目旨在運用人工智能與大數(shù)據(jù)分析技術(shù)，將傳統(tǒng)媒體資源轉(zhuǎn)化為智慧媒體內(nèi)容，以提升全媒體內(nèi)容的管理與運營效率。本文圍繞該背景，探討項目的實施過程、方法及學術(shù)價值，以期為傳媒行業(yè)提供新思路，促進創(chuàng)新發(fā)展。

本文作者：

姚源，張迎慶，查駿元，陳珂，張俊欽 常州廣播電視臺

第一作者簡介：

姚源（1984—），男，常州廣播電視臺技術(shù)中心工程師，本科。主要從事廣播電視技術(shù)維護與管理、媒體融合、智 能媒資、AIGC應(yīng)用方面的研究和技術(shù)服務(wù)工作，曾參與過常州廣播電視臺搬遷至現(xiàn)代傳媒中心的整體技術(shù)流程設(shè)計、常州臺高清化改造、智能媒資平臺的設(shè)計與建設(shè)等重大項目的技術(shù)和管理工作。

NO.1

智能融媒平臺的創(chuàng)建思路

為了盤活全媒體內(nèi)容資產(chǎn)，實現(xiàn)全媒體內(nèi)容管理，常州廣播電視臺啟動了“AI 驅(qū)動多模態(tài)”融媒大數(shù)據(jù)服務(wù)項目的建設(shè)。全面匯聚電視、廣播、新媒體、報紙在內(nèi)的全媒體資源， 利用人工智能、大數(shù)據(jù)分析、大語言模型等先進技術(shù)，打造新型智慧媒體。將常州臺積累近 40 年的珍貴歷史資料轉(zhuǎn)換為數(shù)據(jù)和功能，賦能節(jié)目生產(chǎn)，讓業(yè)務(wù)側(cè)的應(yīng)用創(chuàng)新和平臺側(cè)的智能能力形成優(yōu)勢互補，釋放更大價值。

NO.2

智能融媒平臺的系統(tǒng)架構(gòu)

2.1 智能融媒平臺技術(shù)方案

項目采用私有云 + 智能中臺 +AI 本地化部署的整體框架，整合大模型、人臉識別、語音識別等智能引擎，建設(shè)八大業(yè)務(wù)功能板塊。

2.2 智能融媒平臺的項目架構(gòu)與規(guī)模

本項目基于超融合私有云架構(gòu)，采用微服務(wù)分層設(shè)計，通過容器化（Docker）部署，保障應(yīng)用組件在隔離環(huán)境中高效運行。利用Kubernetes實現(xiàn)容器編排，支持自動化部署、擴展與管理，提升系統(tǒng)可伸縮性與可靠性。借助ZooKeeper進行配置管理、服務(wù)注冊與發(fā)現(xiàn)，實現(xiàn)去中心化集群管理，并結(jié)合三副本部署確保高可用性、數(shù)據(jù)一致性與容錯能力，同時優(yōu)化性能、簡化擴展。

項目配置了8臺超融合服務(wù)器與11塊GPU深度計算卡，具備強大處理能力。

NO.3

智能融媒平臺的建設(shè)

按照平臺功能模塊，主要建設(shè)八大功能板塊，如圖1所示。

圖 1系統(tǒng)整體架構(gòu)圖

1.智能媒資庫管理

提供電視、廣播、新媒體三大媒體渠道圖文視音頻內(nèi)容的統(tǒng)一上載、回遷、歸檔智能標引編目、人工審校等功能。

2.多模態(tài)融合智能處理

整合人臉識別、通用視覺識別、智能審核、0CR、語音識別、自然語言處理等多種智能引擎，可對視音頻、圖文等全媒體內(nèi)容進行多模態(tài)融合智能處理，可對智能處理生成的文本標簽、視覺標簽進行歸一、合并、去重等融合處理。

3.多維度標簽和內(nèi)容大數(shù)據(jù)

基于多模態(tài)標簽知識圖譜，構(gòu)建內(nèi)容門戶，提供全媒體全文檢索及人物、事件、機構(gòu)等多維度分類檢索，支持標簽實體的深度聚合、關(guān)聯(lián)鉆取與分析，并實現(xiàn)知識圖譜的可視化及自定義管理。

4. AI問答

采用大語言模型將海量稿件轉(zhuǎn)化為本地知識庫，通過向量化分析抽取文本關(guān)鍵信息，構(gòu)建知識圖譜，實現(xiàn) AI 智能問答。

5. AIGC

通過整合 AIGC 技術(shù)，輔助創(chuàng)意構(gòu)思、文案撰寫及多媒體內(nèi)容生成，實現(xiàn)個性化內(nèi)容的高效生產(chǎn)，極大地提升創(chuàng)作效率與內(nèi)容質(zhì)量，滿足新媒體運營的多樣化需求。

6.融媒生產(chǎn)應(yīng)用集成

圍繞融媒體生產(chǎn)需求，提供智能處理功能與數(shù)據(jù)接口，涵蓋智能拆條、審核、非編上唱詞、短視頻快剪等工具，支撐新媒體、電視、廣播的智能化融合生產(chǎn)。

7.新媒體運營支撐

針對自有客戶端 APP 等新媒體業(yè)務(wù)運營對智能化處理和內(nèi)容數(shù)據(jù)服務(wù)的需求，提供新媒體運營類的數(shù)據(jù)接口、智能處理接口等各類功能支持。

8.多租戶擴展模式

項目將平臺的算力和服務(wù)以租戶形式輸出給第三方使用。以私有云為底座，通過容器云的軟件部署方式實現(xiàn)應(yīng)用服務(wù)的彈性擴展。支持內(nèi)容管理、智能處理和內(nèi)容大數(shù)據(jù)服務(wù)的按需定制。

NO.4

應(yīng)用成效

項目以租戶形式對外輸出平臺算力與各類服務(wù)。基于私有云與容器云實現(xiàn)彈性擴展，支持內(nèi)容管理、智能處理及大數(shù)據(jù)服務(wù)的按需定制。

目前平臺已與常州市政協(xié)、金壇電視臺等合作，以常州臺近40年視頻素材為基礎(chǔ)，為租戶提供低碼率素材的媒資管理服務(wù)，實現(xiàn)鏡像存儲備份，并輔助孵化區(qū)域特色標簽。同時，依托智能中臺的AI能力，為租戶提供智能標簽生成服務(wù)，支撐其自動化編目、多模態(tài)檢索、智能標引、人物刷庫、專題聚類等業(yè)務(wù)場景。

NO.5

智能融媒平臺的主要技術(shù)創(chuàng)新點

5.1基于多引擎融合的智能中臺設(shè)計

項目集成索貝與騰訊智能引擎，由智能中臺統(tǒng)一管理與調(diào)度，并通過融合智能API網(wǎng)關(guān)對外輸出能力。通過對多引擎處理結(jié)果進行合并、去重、對比等融合推理，形成一套多引擎智能處理方法。

區(qū)別于常規(guī)單引擎方案，本項目采用雙引擎并行處理策略，在視覺識別與自然語言處理領(lǐng)域融合雙方技術(shù)優(yōu)勢，通過結(jié)果融合推理顯著提升了識別準確性與可靠性，如圖2所示。

圖2 智能中臺結(jié)構(gòu)圖

5.2人機共建的多模態(tài)多維度標簽知識圖譜

項目通過人機協(xié)作，構(gòu)建了覆蓋六大領(lǐng)域、二十四個維度的標簽知識圖譜。結(jié)合多模態(tài)智能識別技術(shù)，形成高質(zhì)量的知識關(guān)聯(lián)網(wǎng)絡(luò)，顯著拓展了內(nèi)容數(shù)據(jù)的分析維度，為深度洞察提供了知識基礎(chǔ)。

5.3基于多維度、任意標簽實體的內(nèi)容大數(shù)據(jù)洞察

知識庫基于圖數(shù)據(jù)庫構(gòu)建，支持復(fù)雜知識圖譜，包含人物、機構(gòu)、事件、實體關(guān)系等核心庫，作為標簽庫的重要補充。通過智能與人工融合標引約5000萬次，生成300萬個標簽，構(gòu)建了涵蓋六大領(lǐng)域、二十四個分類維度，包含上百個一級分類、數(shù)千個二級分類的多模態(tài)多維度標簽知識圖譜，顯著提升了內(nèi)容標記能力。

5.4用于數(shù)字內(nèi)容資產(chǎn)智能處理的數(shù)據(jù)治理方法

項目建立了用于數(shù)字內(nèi)容資產(chǎn)智能處理與標引質(zhì)量評估的業(yè)務(wù)指標體系，包括節(jié)目屬性版本、周期性節(jié)目庫存缺漏、智能識別處理、標簽量與分類等維度的量化分析。支持對上述指標進行定期自動化統(tǒng)計與報表生成，以便掌握標簽產(chǎn)出情況，實現(xiàn)對智能處理能力與多維度標簽數(shù)量、質(zhì)量的精細化洞察，從而持續(xù)開展數(shù)據(jù)治理。

5.5應(yīng)用大語言模型，創(chuàng)建廣電知識庫問答系統(tǒng)

項目核心是構(gòu)建統(tǒng)一高效的知識庫問答系統(tǒng)，以處理海量內(nèi)容并提供高質(zhì)量檢索。基于LM Studio+MaxKB框架實現(xiàn)流程自動化與標準化，提升開發(fā)效率。系統(tǒng)依托大語言模型Qwen1.5，自動從文本中抽取實體、關(guān)系與事件，結(jié)構(gòu)化構(gòu)建知識圖譜，并通過MaxKB完成存儲與查詢。

在業(yè)務(wù)層面，系統(tǒng)整合多源信息，構(gòu)建了包含80萬條音視頻解析內(nèi)容的知識庫，結(jié)合檢索增強生成（RAG）技術(shù)，提供高效、準確的自然語言問答接口，顯著提升了資料檢索與歸納能力。

5.6 AI在線工具集

通過結(jié)合智能繪圖技術(shù)，可以實現(xiàn)自動化的 AI 創(chuàng)作，極大地提升內(nèi)容生產(chǎn)的效率和質(zhì)量。如圖3所示。

圖3 AI工具集應(yīng)用界面

具體而言，利用麒智和騰訊提供的人臉引擎、語音引擎以及自然語義處理引擎，構(gòu)建一系列功能強大的AI 工具，這些工具包括但不限于：

1.語音轉(zhuǎn)文本工具：通過語音引擎將音頻內(nèi)容實時轉(zhuǎn)換為文字，便于編輯和存檔。

2.圖片人臉識別：使用人臉引擎自動識別圖片中的人物，并可進一步分析人物表情、年齡等信息。

3.圖片字幕識別：結(jié)合圖像處理和自然語言處理技術(shù)，自動從視頻或圖片中提取并生成字幕。

4.文本關(guān)鍵詞提取：利用自然語義引擎分析文本內(nèi)容，自動提取關(guān)鍵信息和主題詞匯。

5.文本摘要生成：基于深度學習算法，自動生成文本的簡潔摘要，幫助用戶快速把握文章主旨。

6.文本校對與編輯：運用自然語言處理技術(shù)進行語法檢查、拼寫校正和風格統(tǒng)一，提高文本質(zhì)量。

此外，還可以探索更多創(chuàng)新應(yīng)用，如利用智能繪圖技術(shù)輔助視覺設(shè)計，或者開發(fā)能夠理解并回應(yīng)用戶查詢的智能助手等。這些 AI 工具的應(yīng)用不僅能夠顯著提高節(jié)目制作的效率，還能為創(chuàng)意工作帶來更多可能性，推動媒體行業(yè)的創(chuàng)新發(fā)展。

NO.6

結(jié)束語

在信息化和數(shù)字化迅速發(fā)展的今天，常州廣播電視臺通過實施“AI 驅(qū)動多模態(tài)”的智能融媒平臺項目，展示了如何利用人工智能與大數(shù)據(jù)技術(shù)有效轉(zhuǎn)化和升級傳統(tǒng)媒體資源。此項目不僅是技術(shù)進步的體現(xiàn)，更是對傳統(tǒng)媒體行業(yè)轉(zhuǎn)型升級和創(chuàng)新發(fā)展的一次深刻探索。通過整合先進的智能處理技術(shù)和構(gòu)建多模態(tài)知識圖譜，常州廣播電視臺實現(xiàn)了對全媒體內(nèi)容管理的革新，提升了運營效率，賦能了節(jié)目生產(chǎn)，釋放了數(shù)據(jù)價值。這一創(chuàng)新實踐不僅為媒體行業(yè)提供了寶貴的經(jīng)驗，也為其他行業(yè)的數(shù)字化轉(zhuǎn)型提供了示范。希望未來有更多此類創(chuàng)新項目，共同推動我國數(shù)字經(jīng)濟的發(fā)展和繁榮。

end

參考文獻

[1] 王海濤. 人工智能技術(shù)驅(qū)動下融媒體平臺構(gòu)建研究[D]. 北京: 清華大學, 2022.

[2] 李明霞 . 多模態(tài)數(shù)據(jù)融合算法在智能媒體系統(tǒng)中的應(yīng)用 [D]. 上海 : 復(fù)旦大學 , 2023.

《廣播與電視技術(shù)》、“廣電獵酷”廣告經(jīng)營與商務(wù)合作代理：

北京中廣信通文化傳媒有限公司

聯(lián)系人：李聰

聯(lián)系電話：18518221868

好文共賞請轉(zhuǎn)發(fā) 有話要說請留言