Helix以200Hz的頻率協(xié)調(diào)35個自由度的動作空間,,控制從單個手指運動到末端執(zhí)行器軌跡、頭部注視和軀干姿態(tài)的所有動作,。頭部和軀干控制帶來獨特挑戰(zhàn),,當(dāng)它們移動時,既會改變機器人的可達范圍,,也會改變可視范圍,。機器人在調(diào)整軀干以獲得最佳可達范圍的同時,用頭部平滑地跟蹤其手部動作,,并保持精確的手指控制以進行抓取,。即使對于單個已知任務(wù),在如此高維的動作空間中實現(xiàn)這種精度一直被認為是極具挑戰(zhàn)性的,。
Helix還在多智能體操作場景中展示了零樣本學(xué)習(xí)能力,,兩臺Figure機器人成功操作了在訓(xùn)練中從未見過的雜貨,展示了強大的通用泛化能力,。兩個機器人使用完全相同的Helix模型權(quán)重運行,,無需針對特定機器人的訓(xùn)練或明確的角色分配。它們通過自然語言提示詞來實現(xiàn)協(xié)調(diào)配合,,比如“把餅干袋遞給你右邊的機器人”或“從你左邊的機器人那里接過餅干袋并放入打開的抽屜中”,。
研究人員發(fā)現(xiàn)配備Helix的Figure機器人只需一個簡單的“拾取[X]”指令就能拾取幾乎任何小型家居物品。即使在雜亂的環(huán)境下,,機器人也能成功處理從玻璃器皿和玩具到工具和衣物等數(shù)千件前所未見的物品,,而這一切無需任何事先示范或定制編程。Helix成功地連接了大規(guī)模語言理解能力與精確的機器人控制系統(tǒng),。這種通用的“語言到動作”抓取能力為類人機器人在復(fù)雜且不確定的非結(jié)構(gòu)化環(huán)境中的部署開創(chuàng)了激動人心的可能性,。