通過“強化學習”,讓每個智能體適應周圍環(huán)境和群體協(xié)作。未來的分布式機器人可以互相學習,一起工作,共同完成復雜任務。分布式智能體(Agent)具有自主性、交互性、反應性和主動性。
據(jù)美國《連線》雜志網(wǎng)站近日報道,目前大部分人工智能研究都集中在個體智能體(Agent,指能自主活動的軟件或者硬件實體)上,人工智能系統(tǒng)也一直是作為個體運作,但這些個體智能體不能組合成一個團隊來學習、工作,也不能相互協(xié)作完成相應的任務。這種工作模式喪失了一個巨大的機會,未來機器人應該一起工作,互相學習。
在分布計算領域,人們通常把在分布式系統(tǒng)中持續(xù)自主發(fā)揮作用并具有自主性、交互性、反應性和主動性的計算實體稱為Agent。例如一輛單獨行駛在街道上的汽車,一種能根據(jù)周圍環(huán)境變化而不斷調整的恒溫器。
未來機器人可以互相學習,共同工作,從而改變物流(機器人完成訂單并送貨上門)和太空探索(機器人合作探索新領域)等行業(yè)。而真正的挑戰(zhàn)是為這些人工智能機器人在實驗室之外的真實世界做好準備,這才是人工智能應該涉獵的領域。
現(xiàn)實世界遠比人工智能機器人開發(fā)實驗室環(huán)境復雜。在團隊工作中,人類會思考,其他人在做什么?如何共同完成任務?這個任務會發(fā)生怎樣的變化?等等。而這些問題,都將是機器人以團隊形式工作時所需要“考慮”的。為了讓機器人以群體形式工作,讓智能體在周邊環(huán)境中反復試驗,像人類一樣學習。利用他們自己開發(fā)的新算法,以及機器人行業(yè)的經(jīng)驗,對其進行了優(yōu)化,使用了一種名為強化學習的機器學習技術,讓它們適應周邊環(huán)境。
團隊甚至更進一步研究了“多智能體”參與時發(fā)生了什么?!岸嘀悄荏w”強化學習這門新興學科存在許多難題,包括:如何讓獨立的智能體在其他方面建立共識并達成一致?如何確保它們之間不斷的交談不會淹沒整個網(wǎng)絡?當一個有人工智能功能的機器人認為自己知道正確的做事方式,但它卻錯了時又會發(fā)生什么?
只有出現(xiàn)了可行的深度學習 平臺,才有可能真正回答這些問題。亞馬遜的EC2 GPU實例支持的AWS深度學習AMI環(huán)境,這些實例不需要管理機架和服務器,就可以在云上執(zhí)行非常復雜的計算。他們的最終目標是訓練和運行強化學習模型的速度和準確性,以保證機器人足以應對現(xiàn)實世界中行為的影響。比如,當機器人意見不一致時,它們之間不斷的嘮叨不會淹沒整個網(wǎng)絡。
在智能機器人共同學習的理想生態(tài)系統(tǒng)中,整體大于部分之和,這需要重大的技術努力才能實現(xiàn)。
在亞馬遜云服務(AWS)、波音和IBM聯(lián)合資助下,豪的團隊已經(jīng)進行了一段時間的深入研究,通過足夠的計算能力運行復雜的強化學習算法,使一群機器人保持不斷的通信,并在聯(lián)機中調整它們的行為。新的強化學習系統(tǒng)被稱為分層多智能體教學,通過優(yōu)化獎勵功能和更有效的溝通,成功地提高了機器人在團隊范圍內的學習和協(xié)作整合解決問題的能力。利用基于云的服務,團隊中的每個成員都可以根據(jù)自己的需要,訪問盡可能多的計算能力。