近日，中科院自动化所智能系统与工程研究中心团队发表论文OpenHoldem: An open toolkit for large-scale imperfect-Information game research。针对大规模不完美信息博弈研究领域缺少开放性评测环境及基准的问题，论文从三个方面给出了系统性的解决方案。首先，论文提出了一套标准化的评估方法可以多角度评测AI的性能；其次，论文提供了一系列高水平德州扑克基准AI供研究者在线测试及改进；最后，论文公开了一个用户友好的在线比赛平台以方便研究者进行AI大规模测试。OpenHoldem致力于推动大规模不完美信息博弈领域理论与技术的突破，同时促进该领域重要科学问题的研究，比如不确定性对手建模、大规模博弈均衡求解以及人机交互学习等。  相关论文地址：http://arxiv.org/abs/2012.06168   作为大规模不完美信息博弈研究的一个重要实验环境，德州扑克一直受到学术界的广泛关注。近年来，国外德州扑克AI的研发取得了一系列突破，产生了一系列可以战胜人类专业选手的德州扑克AI。然而，由于相关研究细节未完全公开、AI测试基准也不统一，德州扑克AI的研发对于感兴趣的研究者来说仍然充满挑战，这样的现状严重阻碍了该领域的进一步发展。基于此，自动化所智能系统与工程研究中心团队在论文中提出了OpenHoldem：一个以德州扑克为具体研究对象的大规模不完美信息博弈开放研究平台。  在评估方法方面，论文提出了多种强随机博弈AI性能评测算法，可以全方位多角度地对AI性能进行准确客观的评估。最直接的AI性能评测方式是基于AI之间的对抗结果进行评估，但由于德州扑克博弈随机性大，结果只有在大量的对抗下才具有统计意义。为此，论文采用重复扑克、方差缩减等评测算法来大幅降低评测所需的对抗局数；另外，只基于AI之间的对抗并不能衡量AI的最差性能，论文采用了局部最优响应算法来近似计算AI的利用度，以此来衡量AI面对最具针对性对手时的性能。  在基准AI方面，论文提供了知识驱动型、数据驱动型、离线学习型、在线适应型等多种不同种类的高水平两人/多人德州扑克AI。知识驱动型AI是根据德州扑克专业玩家的经验总结得到的，它可以处理德州扑克博弈中遇到的常见情况，研究者可以与知识驱动型AI进行对比来初步验证AI实现的正确性；论文同时提供了一个DeepStack AI（M. Moravčík, Science, 2017）的复现版本，复现过程中使用了12台8 GPU卡的高性能服务器并行生成了千万量级的训练数据，该AI可以战胜ACPC竞赛冠军Slumbot AI（见下图）。  在测试平台方面，论文提供了一个公开的测试平台（可通过http://holdem.ia.ac.cn/进行访问）来方便研究者进行AI测试。平台内置了所有的基准AI和评测算法；支持人人、机机、人机等多种对抗模式；支持多终端并发访问；支持AI分布式并行测试。同时，平台还提供了面向AI研发的工具包，包括AI编程接口、AI开发文档以及博弈复盘服务；平台可接收团队/个人的自研AI，并可将高水平AI纳入作为新的基准，平台的最终目标是构建德州扑克大规模不完美信息博弈领域的标准模型库。  通过论文开放的大规模不完美信息博弈研究平台OpenHoldem，自动化所智能系统与工程研究中心团队希望在国内营造和催生智能博弈相关基础研究的生态环境，带动和激发更大范围和规模的智能博弈基础研究力量进行核心技术攻坚。  走向通用人工智能前路漫漫，让我们共同努力，共同推动智能博弈技术的变革与突破！

近日，一家国际团队开发了一种人工智能算法，它在社交技能方面超过了人类，能与人或机器合作，玩各种各样的双人游戏。该算法被称为S#(“sharp”)，麻省理工学院媒体艺术与科学副教授Iyad Rahwan博士领导的研究人员对其进行了测试。在机器与机器、人类与机器和人类与人类三种类型的交互中，大多数情况下，使用S#编程的机器在寻找对双方都有利的折衷方案时，要优于人类。研究报告的主要作者、计算机科学教授Jacob Crandall说：“如果两个人坦诚相待，彼此忠诚，那么他们就能和机器做得一样好了。”然而，事实上，接近一半的测试者都撒了谎。因此，从本质上讲，该算法的道德感更强（因为它被编程为不说谎），而且它一旦参与合作，也更容易保持下去。Crandall说：“我们的最终目标是，理解人与人合作背后的数学原理，以及找到人工智能发展社交技能需要具备的属性。”“人工智能要对我们做出回应，并清楚地表达自己在做什么。”它必须能够与他人进行互动。如何通过与AI聊天帮助人类增强合作一个重要发现是：使用口语化的短语（在研究中称为“廉价谈话”）可以增强合作。在测试中，如果人类参与者与机器合作，机器可能会给出“甜蜜”的回应，比如，“我们发财了！”或“我很开心接受你最后的提议”。如果参与者想要背叛机器，或退出之前达成的协议，机器可能就会说“诅咒你!”“你会为此付出代价的!”甚至“真不要脸!”之类的话。而当机器使用廉价谈话时，人类往往无法分辨对方是人还是机器，这有点像小型的“图灵测试”。Crandall希望，研究结果可以对人际关系产生长远影响。他说：“社会中的人际关系一直很紧张。多年好友也可能一夜之间反目成仇。这台机器比人更容易找到双方都能接受的折衷方案，所以它可能教会我们如何更好地处理人际关系。”该研究的详细内容已发布于《自然通讯》。论文《与机器合作》（Cooperating with machines）摘要自从艾伦·图灵提出人工智能以来，人工智能技术是否取得进步的衡量标准，通常是以机器能否在博弈类游戏（例如，国际象棋，德州扑克或围棋）中击败人类来衡量的。大家对人机合作能给人类带来多少益处的关注比较少。合作不需要纯粹的计算能力，而是通过直觉、文化规范、情感、信号和预先进化的倾向来促成的。我们开发了一种算法，结合了最先进的强化学习算法与信号机制。结果表明，该算法能在不同的两人重复随机博弈中，与人类和其他相当于人类合作水平的算法相配合。这些结果表明，使用一组能取得非凡效果但方式简单的算法机制，可以实现一般的人机合作。

摘要：人机对抗作为人工智能研究的前沿方向,已成为国内外智能领域研究的热点,并为探寻机器智能内在生长机制和关键技术验证提供有效试验环境和途径.本文针对巨复杂、高动态、不确定的强对抗环境对智能认知和决策带来的巨大挑战,分析了人机对抗智能技术研究现状,梳理了其内涵和机理,提出了以博弈学习为核心的人机对抗智能理论研究框架;并在此基础上论述了其关键模型:对抗空间表示与建模、态势评估与推理、策略生成与优化、行动协同与控制;为复杂认知与决策问题的可建模、可计算、可解释求解奠定了基础.最后,本文总结了当前应用现状并对未来发展方向进行了展望。论文地址：https://doi.org/10.1360/N112019-00048

11月13日至17日，人工智能与交互式数字娱乐大会 （AAAI）在加拿大阿尔伯塔大学举办。经过激烈争夺，主办方宣布了本届星际争霸AI挑战赛结果，三星、脸书以及中国科学院自动化研究所分获2018年星际争霸AI挑战赛前三名。在此次比赛中，中科院自动化所智能系统与工程研究中心副研究员张俊格研究团队设计开发的Bot机器人在2591场比赛中以87.11%的胜率跻身前三甲，荣获大赛季军，在所有中国参赛队中位列第一。