近日,來自上海交通大學(xué)與上海人工智能實驗室的研究團(tuán)隊發(fā)布最新研究成果《MLM:Learning Multi-task Loco-Manipulation》。該研究實現(xiàn)了四足機(jī)器人搭載機(jī)械臂在真實世界中以單一策略完成多任務(wù)“移動+操作”的全身協(xié)作控制,并可與擴(kuò)散大模型結(jié)合實現(xiàn)自主操作。在這一突破背后,F(xiàn)astUMI提供的真實世界多任務(wù)軌跡數(shù)據(jù)發(fā)揮了關(guān)鍵作用。

MLM框架:
統(tǒng)一策略實現(xiàn)移動與操作協(xié)同
MLM是一種基于真實軌跡數(shù)據(jù)與大規(guī)模仿真訓(xùn)練的全身強化學(xué)習(xí)控制框架。該框架使搭載機(jī)械臂的四足機(jī)器人能夠在不進(jìn)行額外真實機(jī)器人訓(xùn)練的情況下,通過統(tǒng)一策略同步完成移動與精細(xì)操作,并勝任多種家庭場景任務(wù),如清潔桌面、傾倒飲料、開啟容器、抓取杯子、拔插充電器等。
研究團(tuán)隊從FastUMI系統(tǒng)中提取了超過1200條高質(zhì)量、多場景的真實操作軌跡,涵蓋多種典型任務(wù),為MLM的訓(xùn)練提供了關(guān)鍵數(shù)據(jù)支持。這些軌跡具備硬件無關(guān)、端到端可用的特性,有效支撐了仿真環(huán)境中的多任務(wù)策略學(xué)習(xí),大幅降低了真實機(jī)器人訓(xùn)練的依賴與成本。

為什么是FastUMI?
真實世界軌跡的價值正在被證明
作為通用操作接口(UMI)的升級方案,F(xiàn)astUMI以“低成本、高適配、易部署”為核心優(yōu)勢,為機(jī)器人真機(jī)數(shù)據(jù)采集提供了高效解決方案。該技術(shù)通過硬件解耦設(shè)計,降低對特定機(jī)器人硬件的依賴,在保證視覺一致性的同時簡化系統(tǒng)集成流程,在典型操作任務(wù)中可實現(xiàn)毫米級精度,采集效率較傳統(tǒng)手段顯著提升。
FastUMI已在多項前沿研究中被驗證為多任務(wù)機(jī)器人學(xué)習(xí)的關(guān)鍵數(shù)據(jù)來源,凸顯了真實世界操作軌跡在訓(xùn)練泛化性強、魯棒性高的機(jī)器人策略中的不可替代價值。

鹿明機(jī)器人推出FastUMI Pro:
打造高效無本體數(shù)據(jù)采集系統(tǒng)
基于FastUMI技術(shù)積累,鹿明機(jī)器人正式推出FastUMI Pro多模態(tài)無本體數(shù)據(jù)采集軟硬件系統(tǒng)。該系統(tǒng)采用“無機(jī)器人本體”的輕量化手持式夾爪方案,整體重量僅600g,負(fù)載能力達(dá)2kg,在便攜性、穩(wěn)定性和連續(xù)作業(yè)能力上表現(xiàn)優(yōu)異,支持在各類場景中靈活、高效地完成數(shù)據(jù)采集。

FastUMI Pro顯著降低了數(shù)據(jù)采集的系統(tǒng)復(fù)雜度與綜合成本,將采集效率提升至傳統(tǒng)方案的3倍,成本壓縮至1/5。該系統(tǒng)每采集一條數(shù)據(jù)即具備高可用性,真正實現(xiàn)了“高質(zhì)量數(shù)據(jù)易得”的目標(biāo),為機(jī)器人學(xué)習(xí)研究及產(chǎn)業(yè)應(yīng)用提供了可靠的數(shù)據(jù)基礎(chǔ)。關(guān)鍵詞:機(jī)器人新聞

目前,鹿明機(jī)器人已依托FastUMI技術(shù)完成超過1萬小時的高質(zhì)量真實操作數(shù)據(jù)積累,并開展了基座模型訓(xùn)練。公司將持續(xù)聚焦數(shù)據(jù)采集硬件、軟件平臺與模型優(yōu)化,構(gòu)建覆蓋數(shù)據(jù)生成、處理與應(yīng)用的完整技術(shù)鏈條,致力于推動開放、高效的具身智能數(shù)據(jù)生態(tài)建設(shè)。(此文出自見道官網(wǎng):m.winenet.cn未經(jīng)允許不得轉(zhuǎn)載否則必究,轉(zhuǎn)載請注明見道網(wǎng)+原文鏈接)見道網(wǎng)工程欄目編輯/邊文君
評論
寫點什么吧~