-
具身智能訓(xùn)練利器!谷歌斯坦福論文感謝了一家杭州六小龍
(文/張睿佳 編輯/張廣凱)
2025年3月6日,在谷歌DeepMind與斯坦福聯(lián)合發(fā)表的一篇論文中,讓AI學(xué)會像人類一樣布置房間:沙發(fā)不懸空、臺燈必放桌面、書架與墻保持合理間距。而在論文的背后,團隊專門感謝了群核科技SpatialVerse團隊提供的物理級真實3D場景數(shù)據(jù)。
群核科技正是前段時間出圈的“杭州六小龍”之一,其業(yè)務(wù)聚焦空間智能探索,而論文中提到的SpatialVerse是群核面向具身智能等行業(yè)開放的虛擬數(shù)字道場。
上述論文主要構(gòu)建了一個名為FirePlace的框架,旨在讓多模態(tài)大語言模型更好地理解3D空間中的幾何關(guān)系。通過這個框架,大語言模型能夠更好地將對象放置在具有復(fù)雜幾何形狀的復(fù)雜場景中。
論文指出,現(xiàn)有的3D圖形基礎(chǔ)模型往往使用邊界框表示每個對象,因此無法表達對象各部分之間的細粒度約束,導(dǎo)致約束只能解釋盒狀對象的位置(而不是將書籍放在書架上,或?qū)⒚q玩具放在帶有靠背和扶手的椅子上)。
FirePlace不僅希望克服上面的問題,還希望讓AI能夠選擇最符合美學(xué)、功能和常識性的對象放置方式。
顯然,想要實現(xiàn)這個目的,首先要有足夠的真實3D場景數(shù)據(jù)供AI學(xué)習(xí)。但是3D空間數(shù)據(jù)的成本比語言數(shù)據(jù)要高得多,數(shù)據(jù)來源成為困擾空間理解大模型和具身智能發(fā)展的最大難題之一。
而群核科技擁有著國內(nèi)用戶量最大的室內(nèi)裝修設(shè)計工具酷家樂,無疑在數(shù)據(jù)層面擁有天然優(yōu)勢。
酷家樂能夠擁有如今的市場份額,背后是對計算機渲染能力的深耕。通過對GPU并行算力的充分開發(fā),酷家樂渲染出圖的成本大幅降低,速度大幅提升,因此受到設(shè)計師的廣泛歡迎。
面向大模型的爆發(fā),群核科技也順勢推出了“群核空間智能平臺 SpatialVerse”,通過精準模擬真實世界的多樣化場景,匯集了海量的3D模型與場景數(shù)據(jù)資源,為 AIGC、具身智能、AR/VR 等前沿科技領(lǐng)域提供了強大且高效的空間數(shù)據(jù)支撐與定制化服務(wù)。
SpatialVerse可以基于3D場景的數(shù)據(jù)生成更多的物理真實場景,并在這些虛擬的場景中,訓(xùn)練機器人避障、抓取、緊急制動,可以有效地提升訓(xùn)練成本和效率。
除了SpatialVerse,在GTC 2025大會上,群核科技開源了他們的最新模型SpatialLM。
目前,SpatialLM已在HuggingFace、GitHub、魔搭社區(qū)等平臺面向全球開發(fā)者開源。
SpatialLM是一個空間理解模型,僅憑一部手機拍攝的視頻,即可生成帶物理規(guī)則的的3D場景布局。
例如,在整理房間這個命題中:利用傳統(tǒng)的2D視頻數(shù)據(jù)標注,機器人無法自動匹配物體的名字與具體的位置、大小、移動方向。如果使用專業(yè)的的激光雷達掃描形成3D點云,又會帶來高昂的成本和較長的制作周期。SpatialLM的出現(xiàn),有效地克服了這兩個問題。
當SpatialLM幫助機器人跨過“空間理解”后,SpatialVerse這個“數(shù)字道場”,讓機器人實現(xiàn)在海量仿真環(huán)境中完成技能學(xué)習(xí)。將SpatialLM和SpatialVerse組合起來使用,能夠推動具身智能訓(xùn)練完成從認知到行動的鏈路閉環(huán)。
同時,群核的這套方案將空間智能訓(xùn)練徹底平民化,只要有手機和電腦,任何開發(fā)者都能接入這套系統(tǒng),為機器人創(chuàng)建物理正確的訓(xùn)練環(huán)境,有利于推動具身智能實現(xiàn)降本增效。
本文系觀察者網(wǎng)獨家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責任編輯: 張睿佳 
-
擴管理面積、拉增值服務(wù),越秀服務(wù)去年營收超38億元
2025-03-20 22:57 觀網(wǎng)財經(jīng)-房產(chǎn) -
王石代言528元一碗的燕窩,3天賣了30盒
2025-03-20 22:57 -
茶咖日報|“云南咖啡是代表中國的”
2025-03-20 20:20 觀網(wǎng)財經(jīng)-消費 -
俄烏談和平,特朗普“金主”暴跌
2025-03-20 18:01 觀網(wǎng)財經(jīng)-海外 -
美聯(lián)儲不降息,“美國經(jīng)濟前景的不確定性在增加”
2025-03-20 17:47 觀網(wǎng)財經(jīng)-海外 -
-
樓市“寒冬”之下,貝殼營收935億創(chuàng)下歷史新高
2025-03-20 17:33 觀網(wǎng)財經(jīng)-房產(chǎn) -
華為“想不到的新機”7499元起售,鴻蒙電腦5月見
2025-03-20 15:10 觀網(wǎng)財經(jīng)-科創(chuàng) -
京東為超萬名全職騎手繳納五險一金
2025-03-20 14:44 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
營收利潤新高后,小米發(fā)出8344萬股獎勵股份
2025-03-20 13:56 觀網(wǎng)財經(jīng)-科創(chuàng) -
華為與廣汽聯(lián)手,成立華望汽車
2025-03-20 13:44 -
如何抑制“AI大模型幻覺”?方舟健客互聯(lián)網(wǎng)醫(yī)療在做精準診斷實踐
2025-03-20 12:39 觀網(wǎng)財經(jīng)-消費 -
AMD總裁蘇姿豐:DeepSeek的成就令人非常興奮
2025-03-20 08:13 觀網(wǎng)財經(jīng)-科創(chuàng) -
BOSS直聘因求職者太多崩了?官方回應(yīng)
2025-03-20 07:53 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
把數(shù)字人成本從數(shù)萬元打到幾十塊,京東斬獲這項唯一特等獎
2025-03-20 07:52 觀網(wǎng)財經(jīng)-科創(chuàng) -
《刺客信條》新作,能否救育碧于水火之中?
2025-03-20 07:51 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
去年營收1789億元的招商蛇口,想用資管、物業(yè)拉增長
2025-03-19 21:32 觀網(wǎng)財經(jīng)-房產(chǎn) -
凱利泰新一屆董事會名單出爐 現(xiàn)任董事長及總經(jīng)理落選
2025-03-19 20:25 -
-
一場數(shù)學(xué)競賽背后的中俄科技與教育合作
2025-03-19 20:03 觀察者頭條
相關(guān)推薦 -
最新聞 Hot
-
臺“友邦”也急了:美國不打錢,我怎么拆華為設(shè)備?
-
特朗普:正在討論割地
-
美國海軍為啥落后中國?“看看這艘軍艦,就明白了”
-
不裝了?以色列防長威脅“永久占領(lǐng)”加沙
-
英國國王要美國加入英聯(lián)邦?特朗普回應(yīng)
-
特朗普再回應(yīng):不想跟中國發(fā)生戰(zhàn)爭
-
特朗普官宣第六代機,緊盯中國
-
對華關(guān)系,歐盟還在掙扎:很吸引人,但…
-
美方:烏克蘭同意舉行總統(tǒng)選舉
-
美媒驚呼:美國高校,這么快就跪了?!
-
“半場就開香檳的美國油氣業(yè),現(xiàn)在卻直撓頭”
-
在這個問題上,“無論美國做什么,歐洲都必須與中國合作”
-
網(wǎng)易云音樂致歉
-
為了造更多坦克,歐盟想找回“鋼鐵初心”
-
美國靠不住了,北約急得給“差生”加作業(yè)
-
“耗資230億美元挑戰(zhàn)中國制造,僅四年就涼了…”
-