2026年,從PMTalk出發(fā),我現(xiàn)在帶著團隊做人形機器人以及腦機接口,利用vision Pro這類空間計算設(shè)備,每一次都是感受到了這幾年前的科技進步與不可思議。
我們這一代人越來越幸福,可以在空間計算下完成系統(tǒng)程序開發(fā),做一些非常有價值的產(chǎn)品。
相較于普通的App應(yīng)用,空間計算應(yīng)用看得見摸得著,并且還能夠互動,通過AI模型還能夠讓這些所謂的虛擬化有生命。
![]()
![]()
我身邊的計算機博士生,都開始躺平了
在最近,我越來越感覺現(xiàn)在人類的學(xué)習(xí)進度已經(jīng)跟不上AI的發(fā)展了,你越花時間學(xué)習(xí)的東西,AI都可以短短時間超越過你,我身邊的計算機博士師兄越發(fā)覺得做科研沒意義,做出來的東西要么就是沒用,要么就是AI就會。
比如我的博士研究是RAG,而3年的博士生涯,RAG從剛出現(xiàn)到現(xiàn)在發(fā)展為agent,已經(jīng)讓單模態(tài)的甚至是多模態(tài)的RAG都變得非常尷尬。
唯一現(xiàn)在AI模型的RAG還能夠發(fā)揮價值的是在垂直行業(yè)領(lǐng)域
但這一點都在被通用模型利用C端的侵入逐步打破。因為通用模型通過人形機器人也在滲透。
一個MR眼鏡操作人形機器人的開源框架
今天推薦的這個開源框架是基于MR眼鏡來操作人形機器人的系統(tǒng),是MIT開源的,支持商業(yè)化使用,雖然僅支持vision Pro與人形機器人和互動,可以完成機器人的頭部追蹤、手勢追蹤完成機器人與人類同步。
![]()
目前開源框架支持下面3個能力
1.真實世界遠程
通過支持聲音、視頻操作,來完成真實世界的遠程操作,可以遠程操作機器人的手勢、與頭部姿勢。
2.機器人與人類同步操作
讓機器人和vision Pro完成同步操作,跟著人類的手勢、頭部姿勢完成行為動作。
3.空間視頻存儲與直播
通過直播與錄播空間視頻,完成機器人視野數(shù)據(jù)錄制與直播,隨時了解遠方情況
![]()
完全自主的人形機器人最難的是物理規(guī)律模型:每個物理規(guī)律都是一個大模型
相較于自動化駕駛,人形機器人主要是要掌握物理世界這些所有規(guī)律,從風(fēng)速、氣壓、重力、再到壓力、硬度等,這些每一個物理規(guī)律都可以作為一個模型,要想機器人在現(xiàn)實世界實時互動,那這些都必須要解決。
否則機器人就像一個紙飛機,只能做一些外部環(huán)境固定的場合,而這個就很難通用起來,因為你幾乎找不到像自動化駕駛汽車一樣有各種交通規(guī)則通用的地方,并且道理很簡單就是不要觸碰到任何真實物體。
而機器人是需要去操作觸碰任何物體
MR眼鏡加人形機器人加空間AI模型,幾乎是唯一的一個過渡方式,全自動化的機器人的通用模型就算可以訓(xùn)練出來,但是要達到亞毫秒級別的延遲,但是通過人類驅(qū)動的機器人則是可以達到這種水平,而人類操作機器人最好的終端不是遙控器,而是MR眼鏡。
通過共享視野以及共享操作,再加上非常低的網(wǎng)絡(luò)延遲,就可以實現(xiàn)機器人像人一樣的行為動作操作。
今天的分享就到這里
開源地址,在公眾號后臺留言回復(fù):visionPro,將獲得這個開源框架。
題圖來自 Unsplash ,基于 CC0 協(xié)議, 如有侵權(quán),請聯(lián)系pmtalk123刪除
“分享產(chǎn)品經(jīng)理改變世界的點滴”
產(chǎn)品顧問| 產(chǎn)品咨詢|培訓(xùn)合作
請?zhí)砑游⑿?strong>PMxiaowanzi
最近我的原創(chuàng)
每日案例拆解庫,AI等產(chǎn)品打卡群
我創(chuàng)建的產(chǎn)品設(shè)計打卡社群,加入后365天,每天體驗一款A(yù)PP。提升產(chǎn)品設(shè)計能力,同時有1300份體驗報告幫助你找到競品
在這里你可以隨時查詢到你想找的各類競品行業(yè)APP,無須自己親自下載就可以馬上得到APP的一手產(chǎn)品優(yōu)化、交互設(shè)計、功能描述信息。
從優(yōu)化&建議、商業(yè)模式、運營、功能描述、交互設(shè)計、產(chǎn)品定位至少6個維度,體驗一款應(yīng)用。
平均1天1塊錢,掃碼購買即可加入
連續(xù)體驗48款應(yīng)用,通過后原路退回
報名后添加星球助理
PMTalk123
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.