英偉達開發(fā)虛擬障礙賽訓練4000只機器狗在幾分鐘內行走
而人形機器人是越來越普遍在今天的世界上,四足機器人狗接管業(yè)務部門在全球各地的各種業(yè)務??吹竭@種需求,我們已經看到波士頓動力和小米等幾家公司提出了可以輕松執(zhí)行重型任務的先進機器狗?,F(xiàn)在,蘇黎世聯(lián)邦理工學院的研究人員與流行的GPU 制造商 Nvidia 合作開發(fā)了一種先進的算法——幫助訓練現(xiàn)實世界的機器狗在穩(wěn)定和不穩(wěn)定的地形上行走和奔跑。
瑞士蘇黎世聯(lián)邦理工學院的研究人員與英偉達合作,為虛擬機器狗創(chuàng)建了一個障礙訓練場。虛擬模擬用于訓練真實世界的四足機器人在斜坡、樓梯和陡坡等復雜地形上行走。
模擬中的四足機器被稱為“ANYmals”,看起來就像成千上萬的螞蟻在虛擬領域漫無目的地蠕動。研究人員使用 4,000 個虛擬機器人來創(chuàng)建模擬,您可以在下方查看。
為訓練機器人而創(chuàng)建的模擬運行在 Nvidia 設計的基于人工智能的專用芯片組上。研究人員表示,由于這些先進的芯片,他們訓練機器人的時間不到使用計算機和服務器中使用的通用芯片訓練它們所需的時間的百分之一。
現(xiàn)在,雖然英偉達的特殊芯片在計算圖形渲染和運行神經網(wǎng)絡方面非常擅長,但它們在模擬攀爬和滑動等基于物理的特性方面并不擅長。然而,根據(jù) Nvidia 模擬技術副總裁 Rev Lebaredian 的說法,研究人員提出了一些基于軟件的巧妙解決方法,以“使其正確”。
在使用大規(guī)模并行深度強化學習創(chuàng)建復雜模擬之后,研究人員用它來訓練現(xiàn)實世界機器人的腿。這使機器人能夠在幾分鐘內學會在斜坡、樓梯和其他復雜地形上行走。而且,每次機器狗學會應對具有挑戰(zhàn)性的地形時,研究人員都會提出更困難的地形挑戰(zhàn),以使控制算法更加先進。
因此,ETH 研究人員和 Nvidia 認為“ANYmals”模擬可以成為使用強化學習在更短的時間內訓練現(xiàn)實世界機器狗的絕佳工具。