-
具身智能訓(xùn)練利器!谷歌斯坦福論文感謝了一家杭州六小龍
(文/張睿佳 編輯/張廣凱)
2025年3月6日,在谷歌DeepMind與斯坦福聯(lián)合發(fā)表的一篇論文中,讓AI學(xué)會(huì)像人類一樣布置房間:沙發(fā)不懸空、臺(tái)燈必放桌面、書(shū)架與墻保持合理間距。而在論文的背后,團(tuán)隊(duì)專門(mén)感謝了群核科技SpatialVerse團(tuán)隊(duì)提供的物理級(jí)真實(shí)3D場(chǎng)景數(shù)據(jù)。
群核科技正是前段時(shí)間出圈的“杭州六小龍”之一,其業(yè)務(wù)聚焦空間智能探索,而論文中提到的SpatialVerse是群核面向具身智能等行業(yè)開(kāi)放的虛擬數(shù)字道場(chǎng)。
上述論文主要構(gòu)建了一個(gè)名為FirePlace的框架,旨在讓多模態(tài)大語(yǔ)言模型更好地理解3D空間中的幾何關(guān)系。通過(guò)這個(gè)框架,大語(yǔ)言模型能夠更好地將對(duì)象放置在具有復(fù)雜幾何形狀的復(fù)雜場(chǎng)景中。
論文指出,現(xiàn)有的3D圖形基礎(chǔ)模型往往使用邊界框表示每個(gè)對(duì)象,因此無(wú)法表達(dá)對(duì)象各部分之間的細(xì)粒度約束,導(dǎo)致約束只能解釋盒狀對(duì)象的位置(而不是將書(shū)籍放在書(shū)架上,或?qū)⒚q玩具放在帶有靠背和扶手的椅子上)。
FirePlace不僅希望克服上面的問(wèn)題,還希望讓AI能夠選擇最符合美學(xué)、功能和常識(shí)性的對(duì)象放置方式。
顯然,想要實(shí)現(xiàn)這個(gè)目的,首先要有足夠的真實(shí)3D場(chǎng)景數(shù)據(jù)供AI學(xué)習(xí)。但是3D空間數(shù)據(jù)的成本比語(yǔ)言數(shù)據(jù)要高得多,數(shù)據(jù)來(lái)源成為困擾空間理解大模型和具身智能發(fā)展的最大難題之一。
而群核科技擁有著國(guó)內(nèi)用戶量最大的室內(nèi)裝修設(shè)計(jì)工具酷家樂(lè),無(wú)疑在數(shù)據(jù)層面擁有天然優(yōu)勢(shì)。
酷家樂(lè)能夠擁有如今的市場(chǎng)份額,背后是對(duì)計(jì)算機(jī)渲染能力的深耕。通過(guò)對(duì)GPU并行算力的充分開(kāi)發(fā),酷家樂(lè)渲染出圖的成本大幅降低,速度大幅提升,因此受到設(shè)計(jì)師的廣泛歡迎。
面向大模型的爆發(fā),群核科技也順勢(shì)推出了“群核空間智能平臺(tái) SpatialVerse”,通過(guò)精準(zhǔn)模擬真實(shí)世界的多樣化場(chǎng)景,匯集了海量的3D模型與場(chǎng)景數(shù)據(jù)資源,為 AIGC、具身智能、AR/VR 等前沿科技領(lǐng)域提供了強(qiáng)大且高效的空間數(shù)據(jù)支撐與定制化服務(wù)。
SpatialVerse可以基于3D場(chǎng)景的數(shù)據(jù)生成更多的物理真實(shí)場(chǎng)景,并在這些虛擬的場(chǎng)景中,訓(xùn)練機(jī)器人避障、抓取、緊急制動(dòng),可以有效地提升訓(xùn)練成本和效率。
除了SpatialVerse,在GTC 2025大會(huì)上,群核科技開(kāi)源了他們的最新模型SpatialLM。
目前,SpatialLM已在HuggingFace、GitHub、魔搭社區(qū)等平臺(tái)面向全球開(kāi)發(fā)者開(kāi)源。
SpatialLM是一個(gè)空間理解模型,僅憑一部手機(jī)拍攝的視頻,即可生成帶物理規(guī)則的的3D場(chǎng)景布局。
例如,在整理房間這個(gè)命題中:利用傳統(tǒng)的2D視頻數(shù)據(jù)標(biāo)注,機(jī)器人無(wú)法自動(dòng)匹配物體的名字與具體的位置、大小、移動(dòng)方向。如果使用專業(yè)的的激光雷達(dá)掃描形成3D點(diǎn)云,又會(huì)帶來(lái)高昂的成本和較長(zhǎng)的制作周期。SpatialLM的出現(xiàn),有效地克服了這兩個(gè)問(wèn)題。
當(dāng)SpatialLM幫助機(jī)器人跨過(guò)“空間理解”后,SpatialVerse這個(gè)“數(shù)字道場(chǎng)”,讓機(jī)器人實(shí)現(xiàn)在海量仿真環(huán)境中完成技能學(xué)習(xí)。將SpatialLM和SpatialVerse組合起來(lái)使用,能夠推動(dòng)具身智能訓(xùn)練完成從認(rèn)知到行動(dòng)的鏈路閉環(huán)。
同時(shí),群核的這套方案將空間智能訓(xùn)練徹底平民化,只要有手機(jī)和電腦,任何開(kāi)發(fā)者都能接入這套系統(tǒng),為機(jī)器人創(chuàng)建物理正確的訓(xùn)練環(huán)境,有利于推動(dòng)具身智能實(shí)現(xiàn)降本增效。
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 張睿佳 
-
-
王石代言528元一碗的燕窩,3天賣了30盒
2025-03-20 22:57 -
茶咖日?qǐng)?bào)|“云南咖啡是代表中國(guó)的”
2025-03-20 20:20 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
俄烏談和平,特朗普“金主”暴跌
2025-03-20 18:01 觀網(wǎng)財(cái)經(jīng)-海外 -
-
-
樓市“寒冬”之下,貝殼營(yíng)收935億創(chuàng)下歷史新高
2025-03-20 17:33 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
華為“想不到的新機(jī)”7499元起售,鴻蒙電腦5月見(jiàn)
2025-03-20 15:10 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
京東為超萬(wàn)名全職騎手繳納五險(xiǎn)一金
2025-03-20 14:44 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
-
華為與廣汽聯(lián)手,成立華望汽車
2025-03-20 13:44 -
-
AMD總裁蘇姿豐:DeepSeek的成就令人非常興奮
2025-03-20 08:13 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
BOSS直聘因求職者太多崩了?官方回應(yīng)
2025-03-20 07:53 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
-
《刺客信條》新作,能否救育碧于水火之中?
2025-03-20 07:51 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
去年?duì)I收1789億元的招商蛇口,想用資管、物業(yè)拉增長(zhǎng)
2025-03-19 21:32 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
凱利泰新一屆董事會(huì)名單出爐 現(xiàn)任董事長(zhǎng)及總經(jīng)理落選
2025-03-19 20:25 -
-
一場(chǎng)數(shù)學(xué)競(jìng)賽背后的中俄科技與教育合作
2025-03-19 20:03 觀察者頭條
相關(guān)推薦 -
“沒(méi)客戶!”獲47億補(bǔ)貼后,三星在美芯片廠推遲投產(chǎn) 評(píng)論 23“美國(guó)已解除這項(xiàng)對(duì)華出口禁令” 評(píng)論 271家樂(lè)福CEO放話:對(duì)中國(guó)小包裹,要學(xué)特朗普征稅100% 評(píng)論 216“2027年起,整個(gè)產(chǎn)業(yè)將拱手讓給中國(guó)” 評(píng)論 129最新聞 Hot
-
“沒(méi)客戶!”獲47億補(bǔ)貼后,三星在美芯片廠推遲投產(chǎn)
-
約翰遜急著表決,民主黨領(lǐng)袖連續(xù)講了6小時(shí),還沒(méi)停…
-
“六代機(jī)機(jī)密會(huì)議,扎克伯格突然闖入”,白宮回應(yīng)
-
8年后,默克爾吐槽特朗普:真裝!
-
美軍評(píng)估又變了,“不是幾個(gè)月是兩年”
-
“即使特朗普下臺(tái),美國(guó)政策也不會(huì)變,中日韓要合作”
-
“船到橋頭自然直”,印外長(zhǎng)回應(yīng)美議員
-
俄海軍副總司令陣亡
-
“在越南的中國(guó)制造商松了一口氣”
-
他倒戈后就躲起來(lái)了,電話都不接,同僚評(píng)價(jià):聰明
-
“美國(guó)已解除這項(xiàng)對(duì)華出口禁令”
-
“印軍將全面排查中國(guó)產(chǎn)零部件”
-
美國(guó)和盟友鬧掰?“本質(zhì)沒(méi)變,中國(guó)需高度警惕”
-
斯塔默不吱聲,英財(cái)相當(dāng)場(chǎng)落淚,“哭崩”市場(chǎng)
-
家樂(lè)福CEO放話:對(duì)中國(guó)小包裹,要學(xué)特朗普征稅100%
-
莫迪表態(tài):金磚是重要平臺(tái)
-