《星际2》，人类首战告负。
2016年3月DeepMind团队的AlphaGo击败世界围棋顶级棋手李世石，但在AlphaGo还名不见经传时，它首先是与职业棋手樊麾较量取得胜利，而如今该团队设计的新的AlphaStar同样击败了星际2的职业选手TLO和MaNa。
TLO是一位德国职业星际2选手，原名Dario Wünsch，1990年7月13日出生。现在效力于职业游戏战队Liquid。根据官方公布的数据，TLO在2018 WCS Circuit排名：44。
（德国职业星际2选手TLO）
MaNa是一位出生于波兰的职业星际2选手，原名Grzegorz Komincz，1993年12月14日出生，目前也效力于Liquid。MaNa去年获得WCS Austin的第二名。根据官方公布的数据，他在2018 WCS Circuit排名：13。
（波兰的职业星际2选手MaNa）
1月25日，DeepMind 的AI AlphaStar 首次亮相。DeepMind 公布了其录制的 AI 在《星际争霸 2》中与2位职业选手的比赛过程：AlphaStar 分别以5:0的成绩战胜了两位职业选手 TLO 和 MaNa 。
最后直播的一场比赛中，DeepMind限制了AlphaStar的游戏视角，并在没有测试的前提下与MANA进行比赛，让人类终于赢了一场。
如何打造AlphaStar
对于如何训练AlphaStar，DeepMind 科学家 Oriol Vinyals、David Silver 表示，首先是模仿学习，团队从许多选手那里获得了很多比赛回放资料，并试图让 AI 通过观察一个人所处的环境，尽可能地模仿某个特定的动作，从而理解星际争霸的基本知识。这其中所使用到的训练资料不但包括专业选手，也包括业余选手。这是 AlphaStar 成型的第一步。
AlphaStar学会打星际，全靠深度神经网络，这个网络从原始游戏界面接收数据 (输入) ，然后输出一系列指令，组成游戏中的某一个动作。
再说得具体一些，神经网络结构对星际里的那些单位，应用一个Transformer，再结合一个深度LSTM核心，一个自动回归策略 (在头部) ，以及一个集中值基线 (Centralised Value Baseline)。
团队会使用一个称为“Alpha League”的方法。在这个方法中，Alpha League 的第一个竞争对手就是从人类数据中训练出来的神经网络，然后进行一次又一次的迭代，产生新的 agent 和分支，用以壮大“Alpha League”。
然后，这些 agent 通过强化学习过程与“Alpha League”中的其他竞争对手进行比赛，以便尽可能有效地击败所有这些不同的策略，此外，还可以通过调整它们的个人学习目标来鼓励竞争对手朝着特定方式演进，比如说旨在获得特定的奖励。
最后，团队在“Alpha League”中选择了最不容易被利用的 agent，称之为“the nash of League”。
AI打星际2意味着什么
早在2003年人类就开始尝试用AI解决即时战略（RTS）游戏问题。那时候AI还连围棋问题还没有解决，而RTS比围棋还要复杂。
直到2016年，“阿尔法狗”打败了李世石。DeepMind在解决围棋问题后，很快把目光转向了《星际2》。
与国际象棋或围棋不同，星际玩家面对的是“不完美信息博弈”。
在玩家做决策之前，围棋棋盘上所有的信息都能直接看到。而游戏中的“战争迷雾”却让你无法看到对方的操作、阴影中有哪些单位。
这意味着玩家的规划、决策、行动，要一段时间后才能看到结果。这类问题在现实世界中具有重要意义。
为了获胜，玩家必须在宏观战略和微观操作之间取得平衡。
平衡短期和长期目标并适应意外情况的需要，对脆弱和缺乏灵活性的系统构成了巨大挑战。
掌握这个问题需要在几个AI研究挑战中取得突破，包括:
• 博弈论：星际争霸没有单一的最佳策略。因此，AI训练过程需要不断探索和拓展战略知识的前沿。
• 不完美信息：不像象棋或围棋那样，棋手什么都看得到，关键信息对星际玩家来说是隐藏的，必须通过“侦察”来主动发现。
• 长期规划：像许多现实世界中的问题一样，因果关系不是立竿见影的。游戏可能需要一个小时才能结束，这意味着游戏早期采取的行动可能在很长一段时间内都不会有回报。
• 实时：不同于传统的棋类游戏，星际争霸玩家必须随着游戏时间的推移不断地执行动作。
• 更大的操作空间：必须实时控制数百个不同的单元和建筑物，从而形成可能的组合空间。此外，操作是分层的，可以修改和扩充。
为了进一步探索这些问题，DeepMind与暴雪2017年合作发布了一套名为PySC2的开源工具，在此基础上，结合工程和算法突破，才有了现在的AlphaStar。
除了DeepMind以外，其他公司和高校去年也积极备战：
• 4月，南京大学的俞扬团队，研究了《星际2》的分层强化学习方法，在对战最高等级的无作弊电脑情况下，胜率超过93%。
• 9月，腾讯AI Lab发布论文称，他们构建的AI首次在完整的虫族VS虫族比赛中击败了星际2的内置机器人Bot。
• 11月，加州大学伯克利分校在星际2中使用了一种新型模块化AI架构，用虫族对抗电脑难度5级的虫族时，分别达到 94%（有战争迷雾）和 87%（无战争迷雾）的胜率。
DeepMind CEO哈萨比斯在赛后说，虽然星际争霸“只是”一个非常复杂的游戏，但他对AlphaStar背后的技术更感兴趣。其中包含的超长序列的预测，未来可以用在天气预测和气候建模中。
本文来源：观察者网综合自微信公众号量子位、钛媒体APP、36氪等
责编|于杨
审核|邱荔
责任编辑：
| 相关下载 |
苦瓜原创，翻版必究！ 《苦瓜电竞》--让你体验不一样的电竞主播圈！ 在每一个游戏版块中，总是会有那么几个出色的主播诞生，例如和平精英的难言，还有王者详情>>
1、 刚刚爸爸气冲冲的拉着弟弟回来，一进门就让弟弟站墙角面壁思过。趁着爸爸走了，我赶紧上前问弟弟怎么回事？弟弟一脸委屈：老师说我最近上课走神，最好的办法就是写详情>>
原标题：陈凯歌两儿子同框！陈雨昂就读国外顶尖大学，颜值却不输明星弟弟 1月17日晚，陈凯歌大儿子陈雨昂晒出跟弟弟在巴黎结束活动后一起吃饭的日常，两人详情>>
原标题：日本动漫中五对“相杀相爱的兄弟”，哥哥为弟弟简直操碎了心！ 每当说到日本动漫中相杀相爱的“兄弟”时，很多观众都会直接联想到《火影忍者》中详情>>
阴阳师百闻牌中跳跳弟弟怎么玩，天梯跳跳弟弟卡组应该怎么搭配?下面小编就给大家带来了阴阳师百闻牌跳跳弟弟天梯上分卡组分享，一起来看看吧。简单讲一下思路：起手必留——禅心详情>>
阴阳师百闻牌手游中很多玩家不知道跳跳弟弟怎么玩，也不知道跳跳弟弟专属牌打法及选择是什么，今天小编就带着大家了解一下阴阳师百闻牌跳跳弟弟评测;跳跳弟弟目前并不是一个强详情>>
原标题：郑恺九年后晒与吴磊的对比照，感叹弟弟发育不错 近日，郑恺在微博上晒出与吴磊九年之前和现在的对比照，并配文：“9年后我证明，你发育得不错！”随后详情>>
LPL官方邀请老WE战队和老IG战队进行一场娱乐赛，但是因此若风选手与西卡选手发生了很大的矛盾，若风直接在微博中点名西卡，说西卡在直播中说了很多对不起自己的话，若详情>>
导 读 阴阳师百闻牌是一款角色养成类的卡牌战斗游戏，玩家可以在游戏中选择你喜欢的卡片进行培养使其获得更强的属性。角色可以配合着其专属的卡牌套组发挥其最大的能力与效详情>>
电竞行业选手一般都是小年轻，感情生活大都比较单一，而且在职业圈也有一个观点，这就是谈恋爱会影响选手的竞技状态，再加上faker等人的榜样作用，导致很多想要详情>>
原标题：李晨和范冰冰弟弟再同框！互不搭话太尴尬，分手还是朋友成笑话？ 10月27日，有网友晒出了一组视频，视频中李晨和范丞丞共同录制节目，这也是李晨与范冰详情>>
原标题：I社大作《AI少女》现已正式发售 我弟弟说想玩这个 由业界之光illusion开发的荒岛生存恋爱模拟大作《AI少女（AI Syoujyo）》已经于今日正式发详情>>
原标题：和年下小奶狼的恋爱，居然这么甜？ hello，大噶好~最近有追什么新剧吗？作为追剧一线爱好者我大概就同时追了三四五六部新剧吧。 其中一部我本来抱详情>>
一、在拉面馆，一奇葩对小二说：“来碗面。”“好！”“拉细点。”“好！”“多放香菜。”“好！”“香菜多放叶少放杆。”“好！”“牛肉切片别切块。”“好！”“面多煮会详情>>
原标题：社畜姐姐和大学生弟弟的高能恋爱竟这么好嗑！ 最近拆妹妹真的是处处做柠檬精，这不，刚在综艺里吃过戚薇李承铉秀恩爱的狗粮，又被戚哥喂了一嘴年下详情>>
硬核游戏好玩吗？这个问题应该要问问最近沉迷《只狼》的呆毛，每天一到下班时间就呼啦啦收拾好东西，跑得比兔子还快。当我悄咪咪地靠近他，问道：咋了，最近有女朋友了吗？呆毛就用诧异的眼神瞄了我一秒，一边跑一边详情>>
弟弟你根本不入我眼表情包大家都保存了吗？下面Game234游戏门户网游戏小编就为大家带来表情包分享详情>>
前一周应该是中国DOTA2玩家最痛心的一周了，两项国际大赛ESLOne卡托维兹和MDL澳门站的比赛，来自中国的队伍都没有走到最后一个比赛日的比赛就全部遭遇淘汰，而最后的冠军分别被Secret和Li详情>>
在刀塔自走棋游戏中弟弟流应该怎么玩呢？接下来就让小编来为大家讲解下刀塔自走棋弟弟流玩法介绍一览吧，感兴趣的小伙伴们速来围观吧~~刀塔自走棋弟弟流玩法介绍：理论基础自走棋是个金钱-战斗力的简单转化，详情>>
原标题：若风约战240W惨被血虐，小漠：现在的若风没有七酱就是个弟弟前几天小智的240W战队和若风车队约战的事情可是吸引了不少网友们的目光，经过三局的友谊赛，若风的详情>>
原标题：lol:骚男弟弟真容曝光,酷似骚男本人,确认过眼神是弟弟游戏所能赚取的利润现在是越来越高了，拿最近最火的英雄联盟来举例子，随便来一个稀有皮肤的抽奖活动详情>>
再过两天，就是S8总决赛开赛的时间，英雄联盟S赛发展已经有八年，从S1在瑞典租借附属场地到S8全球观看人数达到八千万，这项作为体育项目的比赛已经可以称为全球顶级赛事。S详情>>
对于地下城与勇士这个游戏很多玩家都是很了解的，作为一个养成类的游戏！其实每个玩家对自己的主要角色都是非常详情>>
据安兔兔官方消息,目前安兔兔的后台数据库中出现了多个新一代iPad Pro的跑分信息。... 据安兔兔官方消息,目前安兔兔的后台数据库中出现了多个新一代iPad Pro的跑... 详情>>
现年17岁的Jakeylove作为第一年进入LPL的新人，其实在没进电竞圈之前，小编就曾经在斗鱼关注过他详情>>
英雄联盟，一个现在非常火热的游戏，很多人都是非常的喜欢这款游戏的！其实现在很多人对游戏的喜欢已经是非常的多了吧！现在的游戏可以说是非常多的人喜欢了吧，现在玩游戏不像以前详情>>
LOL弟弟舍命救骚男，骚男：弟弟今晚咱们吃夜宵详情>>
LOL骚男弟弟神配合拿下四人头，王者弟弟再次立功详情>>
小编为您搜罗的答案:动画版里的现在的曹焱兵，其实就是弟弟曹玄亮，在他们很小的时候，曹玄亮被卢天佑切断记忆只留了对哥哥曹炎兵的恨意，诱发杀了曹炎兵！等记忆意识恢复后，曹玄亮爆哭变成武神躯，这时候曹炎兵的详情>>
骚男与弟弟solo，说好的虐杀弟弟呢？怎么被弟弟越塔强杀了？详情>>
【7kill】杀弟弟说：我凶起来自己都杀详情>>
弟弟救我！王者弟弟青铜骚！详情>>
