Meta推出開源應(yīng)用Spatial Lingo,讓用戶在真實(shí)場景中對(duì)話虛擬角色

近日，meta 公司在其 GitHub 平臺(tái)上推出了一款名為 Spatial Lingo 的開源 Unity 應(yīng)用，旨在幫助用戶通過現(xiàn)實(shí)世界中的物體識(shí)別來練習(xí)語言。這款應(yīng)用基于 meta 的多種軟件開發(fā)工具包（SDK），為用戶提供了一種新穎而富有趣味的語言學(xué)習(xí)體驗(yàn)。

Spatial Lingo 應(yīng)用的核心理念是通過引導(dǎo)用戶用目標(biāo)語言識(shí)別和描述周圍環(huán)境中的物體，提升其語言能力。用戶將在名為 Golly Gosh 的虛擬角色的引導(dǎo)下，利用身邊熟悉的物品進(jìn)行詞匯練習(xí)。該應(yīng)用支持手部追蹤與控制器操作，增強(qiáng)了用戶的沉浸感。

項(xiàng)目的設(shè)計(jì)旨在為 Unity 開發(fā)者提供對(duì) meta 多種功能的理解和開發(fā)模板。通過使用透視相機(jī) API（PCA）、語音 SDK、混合現(xiàn)實(shí)實(shí)用工具包(MRUK)等，開發(fā)者可以創(chuàng)建更加豐富的混合現(xiàn)實(shí)體驗(yàn)。Spatial Lingo 的主場景和多個(gè)示例場景展示了如何實(shí)現(xiàn)這些功能，包括健身房場景、詞云場景和相機(jī)圖像場景。

為了使用 Spatial Lingo，開發(fā)者需確保其安裝了 Unity6000.0.51f1或更高版本，并配置相應(yīng)的 Llama API 密鑰。項(xiàng)目還特別強(qiáng)調(diào)了安全性，提醒開發(fā)者不要在應(yīng)用中嵌入 API 密鑰，以防其被提取。

Spatial Lingo 的多項(xiàng)功能使其成為語言學(xué)習(xí)的強(qiáng)大工具。應(yīng)用能夠識(shí)別用戶環(huán)境中的物體，并基于此生成動(dòng)態(tài)的語言課程。隨著用戶不斷構(gòu)建其語言樹，系統(tǒng)將自動(dòng)生成與物體相關(guān)的動(dòng)詞和形容詞，從而豐富課程內(nèi)容。應(yīng)用還具備語音合成和轉(zhuǎn)錄功能，支持多種語言，進(jìn)一步提升了互動(dòng)性。

該項(xiàng)目不僅是 meta 在教育領(lǐng)域的一次嘗試，也為開發(fā)者提供了一個(gè)良好的開源示例，展示了如何將混合現(xiàn)實(shí)技術(shù)與語言學(xué)習(xí)相結(jié)合。開發(fā)者們可以在 GitHub 上訪問 Spatial Lingo，獲取源代碼和相關(guān)文檔，進(jìn)一步探索其潛力。