-
具身智能訓(xùn)練利器!谷歌斯坦福論文感謝了一家杭州六小龍
(文/張睿佳 編輯/張廣凱)
2025年3月6日,在谷歌DeepMind與斯坦福聯(lián)合發(fā)表的一篇論文中,讓AI學(xué)會(huì)像人類一樣布置房間:沙發(fā)不懸空、臺(tái)燈必放桌面、書架與墻保持合理間距。而在論文的背后,團(tuán)隊(duì)專門感謝了群核科技SpatialVerse團(tuán)隊(duì)提供的物理級(jí)真實(shí)3D場(chǎng)景數(shù)據(jù)。
群核科技正是前段時(shí)間出圈的“杭州六小龍”之一,其業(yè)務(wù)聚焦空間智能探索,而論文中提到的SpatialVerse是群核面向具身智能等行業(yè)開放的虛擬數(shù)字道場(chǎng)。
上述論文主要構(gòu)建了一個(gè)名為FirePlace的框架,旨在讓多模態(tài)大語(yǔ)言模型更好地理解3D空間中的幾何關(guān)系。通過(guò)這個(gè)框架,大語(yǔ)言模型能夠更好地將對(duì)象放置在具有復(fù)雜幾何形狀的復(fù)雜場(chǎng)景中。
論文指出,現(xiàn)有的3D圖形基礎(chǔ)模型往往使用邊界框表示每個(gè)對(duì)象,因此無(wú)法表達(dá)對(duì)象各部分之間的細(xì)粒度約束,導(dǎo)致約束只能解釋盒狀對(duì)象的位置(而不是將書籍放在書架上,或?qū)⒚q玩具放在帶有靠背和扶手的椅子上)。
FirePlace不僅希望克服上面的問(wèn)題,還希望讓AI能夠選擇最符合美學(xué)、功能和常識(shí)性的對(duì)象放置方式。
顯然,想要實(shí)現(xiàn)這個(gè)目的,首先要有足夠的真實(shí)3D場(chǎng)景數(shù)據(jù)供AI學(xué)習(xí)。但是3D空間數(shù)據(jù)的成本比語(yǔ)言數(shù)據(jù)要高得多,數(shù)據(jù)來(lái)源成為困擾空間理解大模型和具身智能發(fā)展的最大難題之一。
而群核科技擁有著國(guó)內(nèi)用戶量最大的室內(nèi)裝修設(shè)計(jì)工具酷家樂,無(wú)疑在數(shù)據(jù)層面擁有天然優(yōu)勢(shì)。
酷家樂能夠擁有如今的市場(chǎng)份額,背后是對(duì)計(jì)算機(jī)渲染能力的深耕。通過(guò)對(duì)GPU并行算力的充分開發(fā),酷家樂渲染出圖的成本大幅降低,速度大幅提升,因此受到設(shè)計(jì)師的廣泛歡迎。
面向大模型的爆發(fā),群核科技也順勢(shì)推出了“群核空間智能平臺(tái) SpatialVerse”,通過(guò)精準(zhǔn)模擬真實(shí)世界的多樣化場(chǎng)景,匯集了海量的3D模型與場(chǎng)景數(shù)據(jù)資源,為 AIGC、具身智能、AR/VR 等前沿科技領(lǐng)域提供了強(qiáng)大且高效的空間數(shù)據(jù)支撐與定制化服務(wù)。
SpatialVerse可以基于3D場(chǎng)景的數(shù)據(jù)生成更多的物理真實(shí)場(chǎng)景,并在這些虛擬的場(chǎng)景中,訓(xùn)練機(jī)器人避障、抓取、緊急制動(dòng),可以有效地提升訓(xùn)練成本和效率。
除了SpatialVerse,在GTC 2025大會(huì)上,群核科技開源了他們的最新模型SpatialLM。
目前,SpatialLM已在HuggingFace、GitHub、魔搭社區(qū)等平臺(tái)面向全球開發(fā)者開源。
SpatialLM是一個(gè)空間理解模型,僅憑一部手機(jī)拍攝的視頻,即可生成帶物理規(guī)則的的3D場(chǎng)景布局。
例如,在整理房間這個(gè)命題中:利用傳統(tǒng)的2D視頻數(shù)據(jù)標(biāo)注,機(jī)器人無(wú)法自動(dòng)匹配物體的名字與具體的位置、大小、移動(dòng)方向。如果使用專業(yè)的的激光雷達(dá)掃描形成3D點(diǎn)云,又會(huì)帶來(lái)高昂的成本和較長(zhǎng)的制作周期。SpatialLM的出現(xiàn),有效地克服了這兩個(gè)問(wèn)題。
當(dāng)SpatialLM幫助機(jī)器人跨過(guò)“空間理解”后,SpatialVerse這個(gè)“數(shù)字道場(chǎng)”,讓機(jī)器人實(shí)現(xiàn)在海量仿真環(huán)境中完成技能學(xué)習(xí)。將SpatialLM和SpatialVerse組合起來(lái)使用,能夠推動(dòng)具身智能訓(xùn)練完成從認(rèn)知到行動(dòng)的鏈路閉環(huán)。
同時(shí),群核的這套方案將空間智能訓(xùn)練徹底平民化,只要有手機(jī)和電腦,任何開發(fā)者都能接入這套系統(tǒng),為機(jī)器人創(chuàng)建物理正確的訓(xùn)練環(huán)境,有利于推動(dòng)具身智能實(shí)現(xiàn)降本增效。
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 張睿佳 
-
-
王石代言528元一碗的燕窩,3天賣了30盒
2025-03-20 22:57 -
茶咖日?qǐng)?bào)|“云南咖啡是代表中國(guó)的”
2025-03-20 20:20 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
俄烏談和平,特朗普“金主”暴跌
2025-03-20 18:01 觀網(wǎng)財(cái)經(jīng)-海外 -
-
-
樓市“寒冬”之下,貝殼營(yíng)收935億創(chuàng)下歷史新高
2025-03-20 17:33 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
華為“想不到的新機(jī)”7499元起售,鴻蒙電腦5月見
2025-03-20 15:10 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
京東為超萬(wàn)名全職騎手繳納五險(xiǎn)一金
2025-03-20 14:44 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
-
華為與廣汽聯(lián)手,成立華望汽車
2025-03-20 13:44 -
-
AMD總裁蘇姿豐:DeepSeek的成就令人非常興奮
2025-03-20 08:13 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
BOSS直聘因求職者太多崩了?官方回應(yīng)
2025-03-20 07:53 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
-
《刺客信條》新作,能否救育碧于水火之中?
2025-03-20 07:51 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
去年?duì)I收1789億元的招商蛇口,想用資管、物業(yè)拉增長(zhǎng)
2025-03-19 21:32 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
凱利泰新一屆董事會(huì)名單出爐 現(xiàn)任董事長(zhǎng)及總經(jīng)理落選
2025-03-19 20:25 -
-
一場(chǎng)數(shù)學(xué)競(jìng)賽背后的中俄科技與教育合作
2025-03-19 20:03 觀察者頭條
相關(guān)推薦 -
起訴!“加州州長(zhǎng)向特朗普發(fā)起最直接的法律挑戰(zhàn)” 評(píng)論 21“白宮承認(rèn)‘中方?jīng)]打來(lái)過(guò)電話’,我早就知道…” 評(píng)論 141“如果美國(guó)不認(rèn)真對(duì)待,會(huì)被中國(guó)徹底碾壓” 評(píng)論 122中國(guó)按下“暫停鍵”,“波音重大挫折” 評(píng)論 143最新聞 Hot
-
跨性別女性算不算法律定義上的女性?英國(guó)判了
-
“也有想把工廠遷回美國(guó)的,但零件還得從中國(guó)買”
-
“現(xiàn)在是2025年,不是1939年,誰(shuí)敢攔我?”
-
起訴!“加州州長(zhǎng)向特朗普發(fā)起最直接的法律挑戰(zhàn)”
-
“白宮承認(rèn)‘中方?jīng)]打來(lái)過(guò)電話’,我早就知道…”
-
歐盟威脅武契奇:去了,入歐就沒戲了
-
又要跟馬斯克杠上了?OpenAI布局社交網(wǎng)絡(luò)
-
“如果美國(guó)不認(rèn)真對(duì)待,會(huì)被中國(guó)徹底碾壓”
-
“買到就是賺到”,特朗普家族出“股神”?
-
第一通電話打給中國(guó),“不然我們像傻瓜”
-
想得真美!美國(guó)被曝計(jì)劃用關(guān)稅談判來(lái)孤立中國(guó)
-
麻省理工“明星科學(xué)家”,加盟北大
-
中國(guó)按下“暫停鍵”,“波音重大挫折”
-
“中方反制后續(xù)來(lái)了,而特朗普幾乎毫無(wú)還手之力”
-
“‘川建國(guó)’在美國(guó)作妖,倒逼中國(guó)崛起”
-
“我們花了22年在中國(guó)打造這一切,全毀了”
快訊- 美聯(lián)儲(chǔ)強(qiáng)烈警告后,美股16日收盤大幅下跌
- 男子手拎981株罌粟苗入境云南被查
- 優(yōu)質(zhì)中小商家可“零元入駐”,抖音集團(tuán)發(fā)起外貿(mào)優(yōu)品專項(xiàng)扶持計(jì)劃
- 美股三大股指開盤下跌,英偉達(dá)重挫超5%
- 河南成飛書增速最快的區(qū)域之一,5年時(shí)間達(dá)數(shù)十倍量級(jí)增長(zhǎng)
- 京東外賣崩了?官方回應(yīng):服務(wù)已迅速恢復(fù),將發(fā)放10萬(wàn)張補(bǔ)貼券致歉
- 杭州警方通報(bào):排除刑案
- 余承東:鴻蒙智行沒有一輛車因電池問(wèn)題發(fā)生燃燒
-