今天，谷歌大脑团队的十几名成员披露了谷歌研究足球环境(Google Research Football Environment)，这是一个用于训练人工智能掌握足球的3D强化学习模拟器。环境可以模拟足球比赛，包括特定场景，如角球和点球，进球和越位。这一消息是在今天法国女足世界杯开赛之际传出的，而就在前一天，谷歌推出了其球场云游戏服务的定价和游戏。

研究人员可以通过相互竞争或与他们的代理人决斗来直接体验游戏的工作原理。游戏可以通过键盘和手柄控制。此外，多种渲染质量的回放可以在训练过程中自动存储，这使得检查代理正在学习的策略变得很容易，”研究人员在GitHub附带的一篇论文中说道。

Google football environment的测试版可以在GitHub上获得，包括一个基于可玩足球的C游戏引擎，是2017年的开源模拟器。

该环境还包括最先进的强化学习算法proximal policy optimization (PPO)、DQN和Impala，以及一组大约12个不同的场景，用于在研究人员称为足球学院的地方训练人工智能代理。

这种针对特定场景的练习环境包括角球、3比1比赛和与懒惰对手的11比11比赛。在研究论文详细介绍的初步结果中，impala在5亿步训练中表现最佳。

3D模拟器可以考虑球员在球场上的位置和原始像素分析，以找到传球、克服障碍、防守前锋和进球的最佳方式。

通过模拟的强化学习已经被应用于完成许多具有挑战性的游戏任务，例如《星际争霸》，《雷神之锤3》，《围棋》和《乒乓》中训练智能体击败人类，但它也用于从机器人手臂和腿部控制到在线推荐工具的一系列任务中。

研究Google足球环境和OpenAI健身房强化学习环境的协同作用。

版权说明： 本文版权归原作者所有，转载文章仅为传播更多信息之目的，如作者信息标记有误，请第一时间联系我们修改或删除，多谢。

标签：