清华打造足球 AI：首次实现同时控制 10 名球员完成比赛，胜率 94.4%

图片地址：https://img.ithome.com/newsuploadfiles/2021/11/5a34d1d7-c252-4597-9bf5-eb21c19728de.gif

“只见 4 号球员在队友的配合下迅速攻破后防，单刀直入，一脚射门，球，进了！”观众朋友们大家好，您现在看到的是谷歌 AI 足球比赛的现场，场上身着黄色球衣的是来自清华大学的 AI 球员。这届清华 AI 可不一般，他们在艰苦训练之下，不仅有个人能力突出的明星球员，也有世界上最强最紧密的团队合作。在多项国际比赛中所向披靡，夺得冠军。“Oh，现在 7 号接过队友传来的助攻，临门一脚，球又进了！”言归正传，以上其实是清华大学在足球游戏中打造的一个强大的多智能体强化学习 AI——TiKick。在多项国际赛事中夺得冠军则是指，TiKick 在单智能体控制和多智能体控制上均取得了 SOTA 性能，并且还是首次实现同时操控十个球员完成整个足球游戏。这支强大的 AI 团队是如何训练出来的呢？从单智能体策略中进化出的多智能体足球 AI在此之前，先简单了解一下训练所用的强化学习环境，也就是这个足球游戏：Google Research Football