决策智能是国家新一代人工智能的重要发展方向，也是实现国家创新发展战略的重要基石。在决策智能的探索道路上，人机对抗已成为国际公认的重要途径之一[1]。开放背景：继星际争霸人机对抗突破之后，兵棋推演作为人机对抗的下一个挑战，将牵引智能决策技术新的发展[2]。兵棋推演的智能决策技术与挑战[3]一文指出了兵棋AI研发的挑战问题如算子异步协同、非对称环境决策等，为了促进学术界更好针对如上问题开展研究，人机对抗智能门户网站将持续发布兵棋AI学习环境，填补兵棋决策智能研究关键问题基准学习环境空白，满足研究人员对标准学习环境库的需求，推动兵棋推演AI的突破。环境库介绍：依托人机对抗智能门户网站开放平台，学习环境库将持续发布兵棋关键问题对应的标准学习环境集，包括但不局限：部分可观测异步智能体协同、非对称环境智能体进化学习等。图1 兵棋推演AI学习环境库本期开放环境：本次发布的学习环境对应兵棋算子间高效协同与对抗问题，即如何实现不完美信息下异步算子之间的协作[4]。环境地址←请点击，可参考图灵网技术讲堂第2期第2讲。图2 部分可观测异步智能体协作学习环境POAC汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！[1] 人机对抗智能技术，中国科学：信息科学，http://scis.scichina.com/cn/2020/N112019-00048.pdf.[2] AI in Games: Techniques, Challenges and Opportunities，https://arxiv.org/abs/2111.07631.[3] 兵棋推演的智能决策技术与挑战，自动化学报，http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.c210547.[4] The Partially Observable Asynchronous Multi-Agent Cooperation Challenge, https://arxiv.org/abs/2112.03809.

决策智能是国家新一代人工智能的重要发展方向，也是实现国家创新发展战略的重要基石。在决策智能的探索道路上，人机对抗已成为国际公认的重要途径之一。由中科院自动化所智能系统与工程研究中心发布的人机对抗智能门户网站致力于汇聚人机对抗平台环境，共享人机对抗技术成果，发布人机对抗领域最新消息，从而推动人机对抗智能技术生态建设与发展。日前，人机对抗AI训练场已完成功能更新。根据近期开发用户的反馈，本文特提供训练平台以及分布式兵棋AI算法开发的使用教程。通过本教程，研发人员可以快速掌握分布式学习型兵棋智能体开发及训练技巧，从而自主实现更高水平兵棋智能体研发。 本次教程主要分为人机对抗AI训练场视频教程与分布式AI算法开发文字教程。一、关于人机对抗AI训练场的使用基本使用视频教程内容涵盖了从项目创建到获得相应智能体，以及智能体进行进阶调试与训练的完整流程。具体操作包括项目创建，Fork项目，在线训练，一键评估，查看上传排行榜等常用功能。您可以观看以下视频了解如何通过五步操作，完成智能体训练目标：二、关于分布式AI开发关于基准AI的开发需要一定的代码基础，教程内容具有一定的挑战性。完成教程学习后，您将了解如何依托“庙算·智胜”即时策略兵棋人机对抗平台提供的对抗环境和想定（5V5想定（2010431153）），实现一个基于impala的分布式兵棋强化学习AI。 教程主要内容包含impala算法与ray框架，代码架构梳理，代码执行与重要参数说明，强化学习要素，网络设计与决策，控制模块，强化学习训练等内容。详情请见图灵网论坛：http://turingai.ia.ac.cn/threads/detail/464本次教程由康雅萱，姚蒙提供。欢迎大家试用人机对抗AI训练场，诚邀各位专家挑战人机对抗AI训练场在线训练的智能体排行榜并在论坛进行更多的交流。人机对抗AI训练场申请试用地址：http://turingai.ia.ac.cn/training_center全新界面，更多功能，更优体验，人机对抗AI训练场新版本来啦！本次更新新增了代码在线编辑、智能体在线评估、标准想定与分布式强化学习训练等功能，优化了用户体验。在AI训练场新版本中，您可以在线进行源码编辑→分布式训练→推演评估等操作，实现兵棋与德州扑克智能体从0到1的全流程开发、训练与评估。汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！

2021年11月29日，推演环境对“同格交战”，“引导射击”，“改变机动状态”相关规则进行了以下修订：1. 改变机动状态  修订后规则原文：1.1.ⅳ 地面算子在机动转停止过程中，可以进行改变机动状态（模式）的动作；包括切换至：正常机动，行军，一级冲锋，二级冲锋，掩蔽，半速；差异：旧规则下地面算子必须处于静止状态下进行机动状态的转换。修订后地面算子可以在机动转停止过程中改变机动状态。2. 同格交战修订后规则原文：15.a 当同一六角格内存在双方地面算子时，触发同格交战规则，格内地面算子处于同格交战状态，自动按距离为0格进行直瞄射击裁决；将自动选择攻击等级最高的武器进行打击，裁决顺序按照先进入该六角格的算子先实施打击；其打击目标的选择按照“坦克”>“战车”>“其他车辆”>“人员”的优先顺序自动选择；当存在同类型多个目标时，优先选择班组数少的算子进行打击（同类目标班组数相同则随机选择）。差异：旧规则下同格交战规则规定特定算子只能使用特定的武器进行打击（如：步兵使用步兵轻武器，坦克使用直瞄炮等）。修订后同格交战规则将自动选择算子携带的，有弹药剩余的，当前状态下产生最高攻击等级的武器进行战斗。3. 引导射击修订后规则原文：3.d 引导算子进行引导射击，不会退出掩蔽；被引导算子进行引导射击仍会解除掩蔽状态。差异：如果算子在引导射击之前处于掩蔽状态，在引导射击之后将不再退出掩蔽状态。请各位AI开发者在官网下载最新AI开发sdk（wargame.ia.ac.cn）

人机对抗是验证机器智能的试金石，机机、人机、人混等各类对抗赛事是评估能力水平、促进技术发展的有效手段，也是人机对抗智能技术生态的重要组成。为更好推动人机对抗智能技术，庙算人机对抗平台特推出“赛事中心”版块，支持各团体定制并自主开展博弈赛事组织、智能博弈技术评估等工作。“赛事中心”为赛事组织者提供了信息发布、用户管理、数据管理、赛程定制等功能，支持不同的团体在平台上组织开展个性化的赛事，并按赛事进行数据隔离，保障赛事数据的私密性。“赛事中心”具体功能包括：一、赛事管理。获得赛事管理员权限的账户，可通过赛事管理后台定制个性化赛程，查看并管理参赛人员信息、赛事复盘记录、比赛积分和成绩记录等。平台支持赛事管理员编辑制定赛程，也为管理员提供了循环赛赛程自动生成工具。此外，赛事管理员还可以在对抗过程中实时监控比赛进程，以导演权限观摩比赛对抗。二、赛事信息发布。赛事中心为每个赛事提供包含大赛简介、新闻公告、赛事安排、奖项设置、排行榜等功能的赛事首页，支持赛事管理员通过后台编辑和发布赛事通知公告、成绩排行等重要信息。各赛事还可为本赛事设计宣传海报，推送到平台的首页进行宣传，使平台的用户获得公开赛事信息，报名参赛。三、公开/私有赛事管理。庙算平台通过权限管理保障赛程、用户、复盘等赛事数据的私密性。此外还为团体提供了“公开”和“私有”两类赛事模式：“公开”赛事可依托平台发布和宣传，吸引参赛人员；“私有”赛事则通过“赛事验证码”限制参赛知悉范围，只向具有权限的人员开放访问，保证私密性。赛事中心使用流程汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！

决策智能是国家新一代人工智能的重要发展方向，也是实现国家创新发展战略的重要基石。在决策智能的探索道路上，人机对抗已成为国际公认的重要途径之一。由中科院自动化所智能系统与工程研究中心发布的人机对抗智能门户网站致力于汇聚人机对抗平台环境，共享人机对抗技术成果，发布人机对抗领域最新消息，从而推动人机对抗智能技术生态建设与发展。全新界面，更多功能，更优体验，人机对抗AI训练场新版本来啦！本次更新新增了代码在线编辑、智能体在线评估、标准想定与分布式强化学习训练等功能，优化了用户体验。在AI训练场新版本中，您可以在线进行源码编辑→分布式训练→推演评估等操作，实现兵棋与德州扑克智能体从0到1的全流程开发、训练与评估。本次更新的具体功能如下： 1. 代码在线编辑您是否在初入AI开发大门时，反复修改代码与配置文件、打包、部署……花费了太多时间在调试呢？为了应对多元的用户使用场景，对各阶段的算法学习者都提高普适性，训练场现已上线在线代码编辑功能。免去了繁琐的项目配置步骤，提供自助式的参数配置模块，让从零开发更轻松。目前平台支持md，py，txt等主流格式的文件编辑；完成编辑后，您可以一键启动训练，轻松get属于您自己的兵棋推演AI或德扑AI项目。图1：在线编辑页面2. 智能体在线评估新版本训练场中，我们可以直接对训练完毕的智能体进行评估。在评估系统中，您可以自定义局数，将您的智能体与内置的智能体对抗，通过分析对抗结果的胜率曲线以及分数，评估智能体的实战水平。作为对手的内置智能体目前包括知识型AI，学习型AI以及DemoAI。多方对战，多方评估，让您的AI能力更加稳健！图2：评估曲线3. 标准想定与分布式训练功能训练场在此前的Mini Games想定的基础上，新增开放了标准想定，并上线标准想定的分布式训练功能。兵棋开发的常见困难如单机训练耗时耗力难以收敛、多机训练开发难度高等，人机对抗AI训练场的分布式训练功能轻松解决。模型迭代周期大大缩短，快速上手分布式AI开发不是梦。图 3 标准想定与分布式资源配置 目前AI训练场采用申请-审核机制，审核通过后，每个用户拥有五天的试用时间。用户可通过智能门户网站训练中心点击申请使用。欢迎申请，高效的AI开发大门向您打开。欢迎留言提出建议，帮助我们提供更好的服务～汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！

决策智能是国家新一代人工智能的重要发展方向，也是实现国家创新发展战略的重要基石。在决策智能的探索道路上，人机对抗已成为国际公认的重要途径之一。一、庙算人机对抗平台“庙算”出自《孙子兵法》：“夫未战而庙算胜者，得算多也；未战而庙算不胜者，得算少也“。由中科院自动化所牵头研发的庙算人机对抗平台，致力于汇聚人机对抗平台测评环境、共享人机对抗最新技术成果，助力博弈决策智能技术的合力突破。二、赛事目标“庙算杯”系列赛事以兵棋推演为环境，以高水平人类为对手，通过机机、人机对抗评估智能体能力水平。2021年6月至8月，已成功举办首届以智能体应变能力评估为主题的“庙算杯”人机对抗测试赛。（赛事报道请点击）庙算·先启杯AI对抗排位系列赛事，是以助力智能体研发为目的，为智能体参与后续专项赛事设计的热身和训练赛事。赛事以常态化的形式长期在互联网平台开展，全面开放AI接口、新增对抗要素与规则，助力AI团队深入探索以兵棋对抗为代表的不完美信息决策问题，评估并发展自研AI能力水平，同时，通过赛事交流促进研发团队间的技术交流与共享，合力推动智能博弈对抗技术的发展与突破。三、赛事主题“宝剑锋从磨砺出”四、组织机构主办单位：中国科学院自动化研究所承办单位：中国科学院自动化研究所智能系统与工程研究中心五、赛事平台“庙算·陆地指挥官”人机对抗平台（http://wargame.ia.ac.cn/）六、赛事设计1. “先启杯”为长期举办的常态化赛事，设置不同赛季。2. 赛事设“miniGame”“分队”“群队”三个赛道，每个赛季，各赛道分别排名。3. 对抗模式：比赛自开赛日起，每周固定时间段将进行一次五分制大循环的机机对抗，并根据对抗积分形成排行榜；大循环对抗与排行榜每周更新一次，所有榜单均会保留作为本次赛季的成绩记录。4. 参赛AI无需主动发起对抗，平台将自动在每周的比赛日发起大循环对抗。5. 各赛季根据不同的能力评估主题，设定不同的竞赛想定。6. 第一赛季参赛对象：AI智能体。7. 推演加速比：5倍加速。8. 第一赛季竞赛想定：    a. miniGame赛道：minigame3（211033019601）    b. 分队赛道：分队级水网稻田Game1（2110431653）    c. 群队赛道：2021加强群队城镇居民地Game1（2130511321）请各参赛队下载最新SDK使用。9. 第一赛季平台规则：采用2021年发布的新平台元素和规则。详见：《庙算 陆地指挥官》兵棋推演平台规则说明（2021）10. 其他相关事项：    a. AI团队可以在比赛中任意时间（除大循环比赛日）更新代码；    b. 如提交的AI代码不能正常运行，大循环比赛仍将照常进行，对成绩的影响交由开发者自己承担。七、赛程安排智能体报名：10月1日起至赛事结束前1个月（赛季的最后一个月不接受新智能体报名）。智能体开发、训练、线上测试：自报名通过审核后到赛季结束。比赛日：2021年10月1日起，每周三（节假日顺延）。赛季结束：将提前至少1个月另行通知。八、赛事奖项参加智能体，将根据最后一个月的所有排名成绩计算总积分，按总积分分赛道获得赛季冠军、亚军、季军称号，并颁发奖状和证书。所有参赛智能体团队：颁发参赛证书。赛道冠军、亚军、季军：颁发赛季奖状。分队和群队赛道冠军：获得后续“庙算杯”对应赛事决赛直通车席位。九、报名方式1. 通过扫描报名信息二维码进行报名，填写报名信息报名↓2. 报名所需信息：    a. 联系人姓名及联系方式（手机+邮箱，单位信息）    b. AI团队名称，团队成员姓名    c. AI名称（通过审批后在AI中心填写，填写后不能更改）参赛规则：1. 一个庙算账号每个赛事只能有一个AI报名一次。2. 庙算账号报名并审批通过后，将获得“AI中心”的使用权限，可使用AI中心测试和提交代码。3. 自招赛通知起，任意时间均可报名。报名结束时间另行通知。4. 报名成功后，赛事系统将在下一次大循环赛中，自动加入报名的AI。十、联系方式联 系 人：刘晨威联系邮箱：crise-tech-service@ia.ac.cn联系电话：15210067304、010-82544577联系地址：北京市海淀区中关村东路95号智能化大厦4层智能系统与工程研究中心 附件1：图灵网技术资源说明 为推动人机对抗智能技术研究，中科院自动化所智能系统与工程研究中心开放人机对抗智能门户网站（图灵网）。访问地址：http://turingai.ia.ac.cn图灵网提供系列智能技术共享资源：开源数据集资源：图灵网—>技术共享—>数据中心    http://turingai.ia.ac.cn/data_center/show开源基准智能体资源：图灵网—>技术共享—>AI开发中心    http://turingai.ia.ac.cn/ai_center/show智能体训练资源：图灵网—>技术共享—>训练中心    http://turingai.ia.ac.cn/training_center技术交流平台：图灵网—>社区论坛—>技术共享    http://turingai.ia.ac.cn/bbs/detail/11赛事交流平台：图灵网—>社区论坛—>赛事专区    http://turingai.ia.ac.cn/bbs/detail/14更多资源，参赛选手可登录网站查询和申请下载试用。汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！

决策智能是国家新一代人工智能的重要发展方向，也是实现国家创新发展战略的重要基石。在决策智能的探索道路上，人机对抗已成为国际公认的重要途径之一。由中科院自动化所智能系统与工程研究中心发布的人机对抗智能门户网站（http://turingai.ia.ac.cn）致力于汇聚人机对抗平台环境，共享人机对抗技术成果，发布人机对抗领域最新消息，从而推动人机对抗智能技术生态建设与发展。为了更好地促进交流，人机对抗智能门户网站重磅上线技术讲堂板块。技术讲堂定期邀请一线科研人员分享兵棋推演中的智能决策方法、核心技术与开发实战等，帮助对智能决策技术感兴趣的研究人员了解领域发展并快速入门；同时，技术讲堂设置交流互动区，欢迎大家踊跃讨论，头脑风暴，共同推进智能决策技术发展。为满足不同人群对兵棋推演智能决策技术的需求，技术讲堂初设四大板块内容：探索智能决策之美：一线科研工作者对兵棋推演智能决策技术的思考，直指兵棋推演问题挑战与智能决策技术的核心。AI研发进阶之路：一线研发人员分享兵棋AI研发技术，解决兵棋推演中的关键问题与挑战。手把手教你开发AI：跟随一线研发人员开发可以上线对抗的AI，在兵棋门户网站图灵网上实现人机、机机、人混等对抗。在线对抗与复盘分析：通过在线对抗、复盘讲解等学习兵棋推演的策略、背后的技术支撑、能力与局限。兵棋推演智能决策技术讲堂第一期自2021年10月8日开始，每周更新，第一讲分享内容“兵棋推演智能决策技术与挑战”。欢迎大家及时关注，同时我们期待您踊跃报名技术分享，共同推进兵棋推演智能决策技术发展。汇聚人机对抗平台测评环境、共享人机对抗最新技术成果。走向通用人工智能前路漫漫，让我们共同努力，共同推动智能技术的变革与突破！