凶暴,擅长中场突破,短传云流水,几乎没有破裂
去年12月,谷歌与英超曼城合作,在Kaggle平台上举办了第一届AI足球世界杯,吸引了1138队的竞争。其中,网易伏羲加强了学习队伍的优秀表现,斩首了亚军,接近专业教练的AI战术布局能力,让主办方看到了AI足球的巨大潜力。
最近,网易伏羲被邀请与英超曼城俱乐部、谷歌、Kaggle等行业干部深入交流,分享了比赛采用的技术框架和训练方法,共同探讨了AI技术在足球领域的应用方向。
(网易伏羲强化学习团队蓝队)在决赛中率先得分
本次比赛竞争激烈,吸引世界1138支队伍参加比赛
本次比赛在谷歌Research上Football加强学习环境比赛涉及到许多复杂的团队合作和战术变化,同时考验各团队在强化学习中解决一些挑战性问题的能力,如长期决策、稀疏奖励、多智能体等。在
交流会上,主办方认为网易伏羲AI采用的战术已经接近专业教练的做法,在虚拟环境中,具有模拟真正足球比赛战术的能力。同时,网易伏羲的AI选手踢出了自己的风格。中场突破迅速,短传协助攻击,最终得分。
(网易伏羲短传组合)
网易伏羲AI定位球的专业玩法,也让主办方印开发者_如何学编程象深刻。曼城俱乐部母公司、城市足球集团数据洞察和决策技术总监Brian向Prestidge坦言,网易伏羲AI采用的定位球战略与现实比赛中专业教练的定位球战术非常相似。
AI就像真人专业团队一样,不仅可以储备擅长的定位球打法,还可以根据场地的变化灵活调整后续的战术合作。例如,发射线球时,AI会根据场合的状况判断,自主选择保守和过激的做法。
网易伏羲方面表示,加强学习团队在本次比赛中采用多头向量输入模式,主要通过玩家对战环境(PVE)与自我游戏(Self-Play)相结合的训练方式,让AI从0到1学会踢球。在比赛中,团队通过Surgery、模仿学习、课程学习等方式,AI不断扩大状态特征和动作,学习对方的做法,反制,尝试不同的初始站点,丰富开局变化。除了
之外,网易伏羲还采用自主开发的RLEase加强学习框架训练AI。该框架整合了主流强化学习算法,简化了环境访问流程,大大降低了强化学习的门槛。该框架还提供了标准界面,添加新算法时,只需完成标准界面的实现即可,无需人工重复开发分布式等相关功能,游戏中试验新算法也变得容易。
(网易伏羲自主研发的RLEase强化学习框架)
足球赛场极其复杂,球员必须面对许多挑战,但更难的是从中学习规律。人们通常通过失败学习成长,但球场很难容忍失败。Brian Prestidge对AI足球世界杯寄予厚望,他认为,谷歌创造的虚拟环境是一个绝佳的试验场所,球队可以在其中测试战术概念、完善训练方法,让教练更有信心地开展自己的职业生涯。
(曼城母公司高管对AI足球世界杯寄予厚望)
未来,随着技术发展,AI有望更加深刻地改变足球行业。例如,AI可以帮助训练选手,提高战绩的教练制定计划,提供战术支持,也可以帮助管理层更好地经营团队。
在线比赛场外,网易伏羲在这次比赛中使用的强化学习技术也应用于多个网易自我研究游戏。例如,在逆水寒流派竞技场景中,玩家可以挑战比自己排名更高的玩家,如果被挑战者不在线,AI可以代替玩家出战。通过加强学习技术,AI不仅可以提高水平,还可以自我调节难易度,改变多种玩法,体验与真正的名人对抗的乐趣。
(《逆水寒》流派竞技场景)
在《潮人篮球》3V3场景中,AI不仅学会了传球、投篮等基础动作,还学会了分解、协助、突破等多种高级合作方法。
(《潮人篮球》3V3场景)
网易伏羲成立于2017年,是国内专业从事游戏、文娱产业AI研究和应用的顶尖机构,研究方向包括强化学习、图像动画、自然语言、虚拟人、用户画像、大数据平台、云计算平台、云游戏等领域。在为网易众多产品提供高质量和前沿AI技术的同时,网易伏羲正在进一步把AI技术和产品开放给更多合作伙伴,推动行业加速发展。
精彩评论