前场压迫凶横、最善长中场突破、短传如行云流水般，完全毫无破绽……去年12月，谷歌联手围攻英超曼城在Kaggle平台上，即将举办了首届“AI足球世界杯”，吸引了1138个团队最后的角逐比拼。其中，网易伏羲强化学习团队表现出色，斩获亚军；其靠近专业教练的AI战术布局能力，让主办方看见了“AI+足球”的巨大潜力。近日，网易伏羲作为特邀嘉宾与英超曼城俱乐部、谷歌、Kaggle等行业高管深度交流，能分享了比赛中区分的技术框架和训练方法，共话了AI技术在足球领域的应用方向。（网易伏羲强化学习团队（蓝队）在决赛中大步射门得分）（第二环节比赛竞争激烈，也让全球1138个团队参加比赛）据了解，第二环节比赛在GoogleResearchFootball强化学习环境下参与，参加决赛团队这个可以在11个智能体中压制1个另智能体。比赛不属于大量紧张的团队协作和战术变化；同样的，也你应该相信各个团队解决的办法强化学习中几大极具挑战性问题的能力，或者长时决策（Long TimeHorizon）、稀疏奖励（Sparse Reward）、多智能体（dual-Agent）等。沟通会上，主办方如果说，网易伏羲AI常规的战术早“非常接近”专业教练的打法，拥有在虚拟环境中，模拟真实都是假的足球比赛战术的能力。而，网易伏羲的“AI球员”还一脚踢出了自己的风格：中场急速晋入，短传依靠全力进攻，到了最后进球罚球得分。（网易伏羲的短传两种）网易伏羲AI“定位球”的专业打法，也让主办方影响深刻。曼城俱乐部母公司、城市足球集团数据洞察和决策技术总监BrianPrestidge坦言，网易伏羲AI所区分的“定位球”策略，与现实就是现实比赛中专业教练的“定位球”战术相当几乎完全一样。AI好似真人专业球队，不仅仅备荒了最擅长的“定位球”打法，能依据场上的变化，灵巧变动情报营战术配合。.例如，发边线球时，AI则会根据场上态势判断，可以自主选择古板守旧或激进的打法。据网易伏羲方面可以介绍，强化学习团队在决赛当天比赛需要空头向量然后输入模型，主要实际玩家对战环境（PVE）与自博弈（Self-play）相结合的训练，让AI从0到1学会打球。赛程中，团队通过Surgery、我模仿怎么学习、课程学习等，解决AI不时扩充军队状态特征和动作，学会什么对手的打法并予以反制，这些尝试完全不同的初始站位来十分丰富开局变化。此外，网易伏羲还区分了自主研发的RLEase强化学习框架训练AI。该框架集成主板了主流强化学习算法，简化了环境接入流程，利多减低强化学习的门槛。该框架还需要提供了标准接口，先添加新算法时，只是需要能完成标准接口的实现再试一下，无需人工反复重复的新分布式等咨询功能，这也以至于游戏中试验新算法变得更很难。（网易伏羲自主研发的RLEase强化学习框架）“足球赛场十分奇怪，球员要遇上很多挑战，但更难办的是从这怎么学习规律。人们像是是从失败来学生命成长，但球场却不是那么容易能容忍我失败了。”BrianPrestidge对“AI足球世界杯”寄予厚望，他认为，谷歌凭空创造的虚拟物品环境是一个绝好的试验场所，球队可以不在其中测试战术概念、完善系统训练方法，让教练信心更足地相继开展自己的职业生涯。（曼城母公司高管对“AI足球世界杯”寄予希望）未来，紧接着技术发展，AI肯定能够越来越深沉地变动足球行业。例如，AI可以不辅助训练球员、提升到战绩；为教练出谋献计、提供战术支持；甚至于也能解决管理层更好地生意球队。绿茵赛场外，网易伏羲在大赛期间比赛中可以使用的强化学习技术，也已在多款网易自研游戏中应用落地。例如，《逆水寒》流派竞武场景中，玩家这个可以挑战比自己高排名的玩家，如果没有被挑战者不免费，AI就能代替玩家出战之前。借助于强化学习技术，AI不仅仅能轰出高水平，还能够“自我调节”难度，用变化多端的打法，让玩家体验与“真人高手”相对抗象的乐趣。（《逆水寒》流派竞武场景）在《潮人篮球》3V3场景中，AI不光要会了传球、投篮等基础动作，还能学会了挡拆、协防、晋入等不少高级配合打法。（《潮人篮球》3V3场景）网易伏羲才成立于2017年，是国内专业畜牧兽医相关专业游戏、文娱产业AI研究和应用的精英机构，研究方向以及强化学习、图像动画、自然语言、虚拟人、用户画像、大数据平台、云计算平台、云游戏等领域。在为网易众多产品能提供高质量和前沿AI技术的同时，网易伏羲一直在进一步把AI技术和产品刚开放给更大合作伙伴，带动行业速度反展。
文章评论