微软发布了 一款打麻将的 AI 模型,在专业的竞技平台上成功达到最高段位。在这项风靡全国甚至全球的娱乐活动上, AI 雀神的诞生究竟克服了哪些困难,这项技术的诞生又有哪些深层的意义。算法
在今日举行的世界人工智能大会上,微软发布了一个「雀神 AI」——Suphx,在专业的麻将竞技平台上,实力赛过了顶级人类选手的平均水平。学习
Suphx,全称是 Super Phoenix(超级凤凰),于 2019 年 3 月登录日本专业的麻将竞技平台「天凤」。人工智能

在这个最知名的麻将平台上, AI 可以参与的公开竞技「特上房」中,Suphx 与人类选手展开了 5000 余场四人麻将对局,逐渐打出了本身的实力和水准。spa
到了 6 月份, Suphx 达到了特上房的最高段位十段,而限制 Suphx 没能问鼎最十一段位「天凤位」的,只是平台还不容许 AI 系统进入最高级的房间对战。.net
天凤平台自 2006 年推出以来,四人麻将达到过十段的选手约有 180 位,而现役的十段人类选手也不过十几位。但在衡量实力水平的稳定段位上,Suphx 达到了 8.7 段,远远高出人类十段选手的 7.4 段。设计

此前,天凤平台还活跃着另外两个麻将 AI 系统,分别是 2015 年由东京大学发布的「爆打」,以及 2018 年由 Dwango 发布的「NAGA25」,但两者的稳定段位均低于 6.5,被 Suphx 远远地甩在了身后。3d
千年历史的麻将:缓慢演进的大众休闲
麻将,也称「麻雀」或「雀牌」等,是正宗的国粹。调试
有关麻将起源的说法五花八门,至于其真相也无从考证,但能够肯定的是,麻将自从问世后,做为全民娱乐项目,麻将一直流行于民间,经久不衰。blog

而麻将牌的符号和制做也历经了屡次变迁,最先的麻将牌竹子和动物骨头制做,此后还有过纸牌的时期。游戏
在达官贵人中,还曾用犀牛角,象牙,金银铜,青花瓷来制做,彼时的麻将牌由精工巧将们一张张雕刻而来。

直到 1960 年之后,塑料用品的普及,以及机械化的发展,使得麻将逐渐以材料被大量生产。
但除了制做工艺上的变化,麻将里的最高科技,除了 AI,可能就是自动麻将机了。
AI 胡牌,全靠推理
在 AI 研究以前,不少人一度认为麻将中,运气是决定性的因素。但其实麻将的竞技规则,实际上是很复杂的问题。
136 张麻将的排列组合有许多种结果,同一玩家两次出牌之间,夹杂了其余 3 位玩家的出牌,还有本身的摸牌,并且还有「吃」、「碰」、「杠」都会让牌局产生动态变化。
其次这是一个非完美信息问题。每一个玩家只能知道本身的 13 张手牌,以及被打出的牌,而其余人的牌和剩余底牌都是未知,这些隐藏信息致使了变数众多。

即使是颇有经验的玩家,也难以理清已知牌面和最佳打法之间的逻辑关系,丰富的隐藏信息会致使游戏的复杂度加重。
这须要在整个过程当中,作好策略的规划,好比在局势不利的状况下,战略性地「放炮」让第四名玩家获胜,以防止被总分第二名的反超。
所以,想要打造一个高手麻将 AI ,只有强大的算力是不够的,更须要的还在于,让 AI 具备直觉、预测、推理和模糊决策的能力。
成为一代雀神,靠深度强化学习
针对上述难点,微软利用深度强化学习打造的 Suphx,经过最新的算法,一步步在学习和调试中,晋升成了竞技麻将的最强雀神。

首先是「初始化」阶段,利用「天凤」平台的公开数据,研究人员经过有监督学习,获得一个初始模型,并在模型基础上,用自我博弈的方式进行强化学习训练。
随后,针对非完美信息博弈的挑战,Suphx 创新性地尝试了先知教练技术来提高强化学习的效果。
在训练阶段,利用不可见的隐藏信息,引导 AI 模型的训练方向,让它的学习路径更加清晰、贴近完美信息意义下的最优路径,从而促使 AI 模型深刻理解可见信息,从中找到有效的策略。

此外,对于麻将复杂的牌面表达和计分机制,他们利用全盘预测技术,搭建起每轮比赛和 8 轮事后的终盘结果之间的桥梁。
经过精巧设计的预测器,模型可以理解每轮比赛对最终结果的影响,从而有全局性的决策视角。
研究团队还引入了新的机制,可以对牌局的过程进行动态调控,让 Suphx 在推理阶段根据最新信息进行策略调整,做出自适应的决策。
最后就是进入实战,经过不断参与到人类玩家的对局中,让 AI 不断学习以提高本身的技能。

自 3 月进入天凤平台以后,Suphx 一直在不断的自我进化。目前,在平衡攻击和防护方面,Suphx 可以实现比顶尖人类玩家更明智的策略,战略性地完成短时间损失与长期收益之间的权衡,并根据已有的模糊信息进行快速决策。
麻将 AI :不止是牌桌上的胜负
得益于其新算法和训练技巧, Suphx 在打法和风格上独树一帜。
天凤平台上的的顶级人类玩家,就在社交媒体上盛赞 Suphx,他以为本身看了不少 Suphx 的比赛,学到了不少未曾见过的技术。
此外,还有不少玩家都说在 Suphx 的对战中,学到了实用的对战技巧,所以也纷纷将其称为「麻将教科书」、「Suphx 老师」。

对于麻将的输赢,市井百姓享受的是运气和经验的快感,而高手享受的是智力的较量。
这样一个「雀神」AI ,除了打造一个无敌的麻将教练,还能打开全新的视角,让咱们从数据算法的维度,去解析这项娱乐。
再也不像一个赌徒般依赖于运气,而在脑力的光环之下,逐渐抛下那些随机的不定的东西,探索出一套胜利的规律。
这不正是 AI 发展之路上,最迷人的一束光吗?
