過去十年中，人工智慧取得了長足的進步，在圖像和語音辨識上已經在某種程度上超越了人類。而通過回饋獎勵，單個的AI智慧體也能在雅達利這樣的視頻遊戲和圍棋中戰勝人類。
但人類真正的智慧還包括了社會和集體智慧，這也是實現通用智慧必不可少的。就像雖然單個螞蟻的智慧有限，但通過協作它們能狩獵，能築巢，能發動戰爭。毫無疑問，人工智慧的下一個挑戰就是讓大規模的AI智慧體學習人類水準的協作與競爭。
協作的一個例子就是星際這樣的即時戰略遊戲。雷鋒網消息，最近阿裡巴巴與倫敦大學的研究人員們，
就在一篇論文中展示了如何用星際爭霸作為測試場景
，讓智慧體協同工作，在多對一和多對多中打敗敵人。
掩護攻擊
這項研究主要關注星際中的微管理任務，每個玩家控制自己的單位，在不同的地形條件下殲滅對手。星際這樣的遊戲對電腦來說可能是最困難的，因為它們的複雜程度比圍棋要高得多。這種大型多智慧體系統學習面臨的主要挑戰是，參數空間會隨著參與人數的增加而呈指數級增長。
研究人員讓多智慧體把星際中的戰鬥當作零和隨機遊戲來學習。為了形成可擴展且有效的通訊協定，研究者引入了一個多智慧體雙向協調網路BiCNet，智慧體可以通過它來交流。另外，研究中還引入了動態分組和參數共用的概念，來解決擴展性問題。
邊打邊跑策略
BiCNet可以處理不同地形下的不同類型的戰鬥，且對戰時雙方都有不同數量的AI智慧體。
分析顯示，在沒有任何諸如人類示範或標籤資料的監督時，BiCNet也能學習各類協調策略，而這些策略與經驗豐富的玩家所展現出來的很相似，比如在不引發衝突的情況下移動，邊打邊跑等基本策略，以及 掩護攻擊與適度集中火力等高級技巧。
另外，BiCNet還可以輕易適應異構智慧體任務。在實驗中，研究者根據不同的場景對網路進行了評估，發現它表現優異，在大規模現實應用中有潛在價值。
研究中還發現，指定的獎勵與學習策略之間存在很強的相關性。研究人員計畫進一步研究這種關係，研究 策略如何在智慧體網路中傳遞，以及是否會出現特定的語言。另外，雙方都通過深度多智慧體模型來操作時，納什均衡的的探討也很有意義。
論文閱讀：
https://arxiv.org/pdf/1703.10069.pdf
