神奇！AI教會四條腿的機(jī)器人如何摔倒后爬起來

　　教機(jī)器人如何走路已經(jīng)不新鮮了，如果教機(jī)器人摔倒后如何站起來呢?近日，蘇黎世聯(lián)邦理工學(xué)院(ETH Zurich)的研究人員在人工智能(AI)的幫助下，完成了這項不簡單的任務(wù)。

　　在Arxiv.org一篇新發(fā)表的論文“使用深度強(qiáng)化學(xué)習(xí)的四足動物機(jī)器人的強(qiáng)健恢復(fù)控制器”中，他們描述了幫助機(jī)器人在絆倒和摔倒后從地上爬起來的人工智能系統(tǒng)。

　　研究人員在報告中寫道：“在摔倒的情況下，動物表現(xiàn)出從任何姿勢中恢復(fù)過來的非凡能力，它們可以通過擠壓周圍環(huán)境和擺動四肢來獲得動力。在有腿的機(jī)器人中擁有類似的能力，將顯著提高它們對失敗的穩(wěn)健性，并擴(kuò)大它們在惡劣環(huán)境中的適用性。我們在目前的工作中，通過開發(fā)一個四足機(jī)器人的穩(wěn)健恢復(fù)機(jī)動控制策略來解決這個問題?！?/p>

　　他們的模型采用了一種名為深度強(qiáng)化學(xué)習(xí)的人工智能訓(xùn)練技術(shù)，該技術(shù)使用一種獎勵機(jī)制來驅(qū)使探員朝著特定的目標(biāo)前進(jìn)，并控制機(jī)器人的恢復(fù)動作。通過四種神經(jīng)網(wǎng)絡(luò)策略，即研究人員在模擬環(huán)境中分別對它們進(jìn)行了訓(xùn)練，再將它們部署在一個名叫ANYmal，有四條腿，如小狗一般大小，并且擁有12個自由度的機(jī)器人上。

　　控制器組件根據(jù)最近的觀察、命令、先前選擇的行為類型和先前的動作等因素，為機(jī)器人的給定情況選擇三種行為之一——移動、站立或自扶正，另外一個模塊則是高度估計器，測量了它的基礎(chǔ)高度，以防止機(jī)器人偏離軌道。

　　研究人員說，人工智能驅(qū)動的策略消除了手工制定恢復(fù)規(guī)則和序列的需要，相對于許多流行的控制方案具有優(yōu)勢。此外，結(jié)果被證明是非常欣喜的，因為它們能夠處理不可預(yù)知的情況，比如機(jī)器人的腿卡在底部以下。

　　初步結(jié)果令人鼓舞，在機(jī)器人開始躺下的50次測試中，自我糾正策略在5秒內(nèi)成功恢復(fù)。此外，即使機(jī)器人的底座幾乎是倒立的，腿被卡在下面的時候，它也能成功，有時它會在嘗試站立之前，指令機(jī)器人側(cè)翻。

　　在第二項實驗中，研究人員在任何動物行走或站立時踢它，這項政策成功恢復(fù)了47次，只有當(dāng)機(jī)械四足動物的關(guān)節(jié)位置異常高時才會失敗。研究人員承認(rèn)，該系統(tǒng)只在平地上訓(xùn)練和測試過，這意味著它在面對陡峭的斜坡或崎嶇的地形時很可能會失敗。但在未來的工作中，他們計劃通過隨機(jī)模擬環(huán)境來解決這一限制。