人形機器人未來進入家庭、工廠、商超等場所后，能代替人類做哪些工作？上海智元新創(chuàng)技術有限公司近日聯合上海人工智能實驗室、國家地方共建人形機器人創(chuàng)新中心和上海庫帕思科技公司，發(fā)布了基于全域真實場景的百萬真機數據集開源項目AgiBot World。打飯倒水、熨燙衣服、洗刷馬桶、搬運重物、商品掃碼……這個面向全球具身智能開發(fā)者的數據集包含80多種工作技能，展示了人形機器人的廣闊應用前景。
為何要將這么多數據開源？智元聯合創(chuàng)始人、首席技術官彭志輝（網名為“稚暉君”）說，在具身智能領域，數據的多樣性和真實性對算法創(chuàng)新至關重要，而真機數據的采集成本和門檻非常高。作為一家“獨角獸”企業(yè)，智元憑借技術開放性和行業(yè)責任感，希望眾多科研團隊基于真實數據進行具身智能算法的訓練，加速技術創(chuàng)新和產品應用。
在數據采集工廠訓練機器人
AgiBot World數據集源自智元的數據采集工廠，這個面積約2000平方米的工廠位于張江科學城，有上百臺人形機器人。工廠里還建有家居、餐飲、商超、辦公和工業(yè)等5類人形機器人應用場景，包含3000多件真實物品。在家居場景中，公司復刻了真實住宅布局，包括客廳、臥室、廚房、衛(wèi)生間等空間。工業(yè)場景則打造了倉庫和生產線，包括分揀系統(tǒng)、打包設備、傳輸帶等，可以訓練機器人從事分揀、打包、搬運等工作。
數據采集工廠建有5類人形機器人應用場景。
在這一高度仿真的環(huán)境下，公司員工每天都在訓練人形機器人執(zhí)行各種任務。解放日報上觀新聞記者看到，這些數據采集師手持兩個手柄，在重復做各種事情，比如在流水線上抓取某種物品，并放入指定的包裝盒；用掃碼設備掃描商品的二維碼，再把它放入袋子并遞給顧客……通過手柄的遙操作，機器人會跟著他們做同樣的動作。在“手把手”訓練的同時，所有數據都會上傳云端，成為AgiBot World數據集的備選數據。
“我在訓練的一項商超場景任務時長1分鐘左右，每天采集約150條數據�！币幻麛祿杉瘞熣f，“估計要采集上萬條數據，機器人才能學會這項任務�！�
數據采集師在“手把手”訓練人形機器人的流水線作業(yè)技能。
彭志輝介紹，智元為每臺機器人安裝了8個環(huán)繞式布局的攝像頭，讓它們能360度實時感知周圍環(huán)境的變化；配備了6自由度靈巧手，確保動作精準且靈活；靈巧手的末端裝有六維力傳感器和高精度觸覺傳感器，讓機器人能感知力的微小變化，做到“拿捏有度”；機器人全身有32個主動自由度，可靈活應對多種復雜任務。
為確保數據集的質量，員工采集到的備選數據將經過端側、云側的嚴格篩選。數采系統(tǒng)會自動剔除不符合要求的數據，再由審核員逐幀審核，確保機器人做的每個動作都符合任務標準。最后，這些數據還會接受算法的二次驗證。
人形機器人在學習熨燙衣服技能。
具身智能迎來ImageNet時刻
目前，AgiBot World數據集覆蓋100多種真實場景，其中家居場景占40%，餐飲和工業(yè)場景各占20%，商超和辦公場景各占10%。完成數據采集的機器人任務中，約80%為長程任務，任務時長60150秒。據介紹，與谷歌開源的Open X-Embodiment數據集相比，AgiBot World長程數據量多10倍，場景覆蓋面大100倍。
就像AI大語言模型的開發(fā)需要海量語料訓練，人形機器人要成為合格的服務員或工人，也需要大數據訓練。AgiBot World數據集開源后，眾多科研團隊就能用這些數據訓練具身智能大模型，讓人形機器人掌握各種標準化技能。
人形機器人在學習家庭除塵技能。
從抓取、放置、推、拉等基礎操作，到攪拌、折疊、熨燙等復雜動作，數據集涵蓋了人類日常生活所需的大多數“原子動作”。由多個“原子動作”組成的長程任務中，有些任務需要精細操作，完成機器人訓練和數據采集頗為不易。比如，教會機器人使用洗碗機后，廚房水池里的餐具即使層層堆疊，機器人也能將它們準確無誤地放入洗碗機的各個卡槽；在安裝電腦內存條的場景中，經過反復訓練，機器人實現了毫米級控制，能精準地將內存條插入電腦主機的相應位置。
人形機器人在學習清洗馬桶技能。
“我們希望這是一個里程碑式的開源項目，標志著具身智能領域迎來了‘ImageNet時刻’�！迸碇据x告訴記者。ImageNet是一個用于視覺對象AI識別研究的大型可視化數據庫，由美籍華裔科學家李飛飛等人創(chuàng)立，引發(fā)了深度學習技術革命。如今，在方興未艾的具身智能領域，AgiBot World百萬級真機數據集包含傳感器數據、操作數據和環(huán)境交互數據，有望大幅降低這一領域的研究門檻，推動人形機器人技術創(chuàng)新、跨學科合作和行業(yè)應用。
人形機器人在學習插花技能。
今年，這家上海企業(yè)計劃舉辦一系列AgiBot World挑戰(zhàn)賽，面向全球吸引科研團隊和創(chuàng)新人才參賽。在這一技術共享平臺上，利用數據集開發(fā)的各種機器人將同場競技，參賽者還將進行技術交流合作，探討如何制訂這一未來產業(yè)的技術標準和規(guī)范。
展望人形機器人產業(yè)的未來發(fā)展，彭志輝認為，未來23年，它們將在制造業(yè)領域逐步普及，特別是在柔性生產、裝配線等場景中發(fā)揮不可替代的作用；未來5年內，它們將進入家政領域，憑借一些成熟技能從事較為簡單的家務、陪伴和照護工作，成為不少家庭的新成員。
