开云体育入口-APP下载

开云体育入口-APP下载

全国服务热线

400-123-4567
11677767476

OpanAI公布DotaAI比赛细节,自我对局让它超越人类:开云体育入口

作者:开云体育入口   发布时间:2023-01-16   点击量:

本文摘要:攻下棋手后,人工智能研究者们可能不约而同地把电子竞技游戏作为下一个训练场。

攻下棋手后,人工智能研究者们可能不约而同地把电子竞技游戏作为下一个训练场。上周报报道显示,在Dota2国际邀请赛TI7中,OpenAI首次展示了自己的成果,在西雅图中AI在1v1比赛中打败了职业选手,再次关于AI的讨论消失了。(公共编号:)对比赛结果也进行了很多分析,从现在的资料来看,1v1比赛可能比棋手简单得多,在1v1比赛中取得胜利,也不能说明在5v5的原始比赛中能够战胜人类,人类还有一定的精神。

经过一周左右的时间,OpanAI最后发表了DotaAI的细节,但还是保存着,没有说明技术细节。最后,他们说最后的目的是在5v5比赛中战胜人类。右图是游戏AI的TrueSkill评价(类似于国际象棋中的ELO评价)的分数变化,计算方是模拟AI之间的游戏对局,仔细观察胜利率。TrueSkill系统是基于贝叶斯推测的评分系统,由微软公司研究院开发,主要用于多人游戏。

开云体育入口

该评分系统考虑了玩家水平的不确定性,综合考虑了玩家的胜利率和可能的水平变动,不是以胜利率为基础的评分。图中显示的变化趋势是线性的,这意味着AI的提高水平在圆形指数水平上迅速增加。

OpenAI明确说明了项目的研究开发日程。从某种角度来看,15%的玩家超过1.5KMR,58%的玩家超过3k,99.99%超过7.5k。MMR是比赛给定的等级系统,全名是matchmakingranking,非常简单的解说的阶梯。

3月1日:在非常简单的Dota环境中获得了最初的经典增强自学结果,AI操作者的黑暗游侠可以应对神牛。5月8日:1.5kMMR水平的测试员说自己的速度比AI慢。

6月初:打败1.5kMMR水平的测试者6月30日:在与3k对战MMR测试者的比赛中,多数不输给7月8日:与7.5K对战MMR水平的半专业测试者,再次输给。8月7日:3-0打败Blitz(6.2k的前职业选手),2-1打败Pajkatt(8.5k的职业选手),3-0打败CC&C(8.9k的职业选手),但系统无法打败顶级选手Sumail。8月9日:10-0打败了Artezy(10k职业选手)10-0,但指出系统无法完成Sumail。

8月10日:6-0打败Sumail(8.3k职业选手,顶级1v1玩家),但与8月9日版的系统对战结果为2-1。8月11日:2-0打败Dendi(7.3k职业选手,前世界冠军)2-0。此时的系统对战前一天的版本,胜利率为60%。

AI和Sumail比赛的原始比赛是5v5版本,但1v1也经常出现在一些比赛中。OpenAI写道,系统在标准比赛规则下对战,1v1中没有特别修改AI。系统的操作者环境如下:仔细观察游戏中使用的BothAPI模块,功能集和视角和人类玩家一样,不受英雄、士兵、信使和附近地形的影响。整个游戏对AI系统来说可以部分仔细观察。

操作者:也调用BotAPI,操作者的频率受到限制,与人类的水平非常高。这也包括移动到某个方向、反击或用于某个物品的频率。

开云体育入口

系统:系统在获得比赛后不会获得报酬。其他基本指标,如英雄的生命状态和最后一击等,也不会影响报酬。系统还可以自由选择使用的几十个装备工具,自由选择后没有评价。

OpenAI他用传统的增强技术分别训练开局前的挡兵,这基本上是1v1的标准操作者。AI和Artezy比赛OpenAI称,他们用的方法融合了少量的教练式训练和自我对战,每天都有相当大的提高。

例如,在TI比赛的时候,星期一晚上Pajkatt输给了系统当时,他用于不可思议的装备,也就是说早期卖了魔棒。之后,OpenAI加入了这个操作者的训练。周三下午OpenAI再度测试近期系统。

在比赛中,人工智能在第一波反击中抛弃了大部分血液。当所有研究人员都想把系统恢复到原始版本时,他们注意到了难以置信的发展。

最初的第一波反击是诱惑对方使用更保守的攻击方法。系统更进一步的自我对局逐渐解决问题,学习杯葛引导战略。与Artezy的比赛后,OpenAI改版了防御模型,减少了系统的TrueSkill分数。

并且在与Sumail比赛前开展了进一步的训练,将TrueSkill减少了2分。Sumail比较结束后,AI学会了在敌人的视线外压影炮,停止了敌人视野外的恢复。Arteezy还与OpenAI的7.5k评价半专业测试员进行了比赛。

Arteezy输了比赛,但测试人员使用了从AI系统学习的把戏,非常惊讶。Arteezy后来说,这是他以前和Paparazi比赛时对方使用的把戏,很少有人使用。

这种情况在棋手中也经常出现。AlphaGo战胜李世石后,与柯洁进行比赛,人类棋手也开始更多地自学其布局和先手。

开云体育入口

Sumail对战后,AI系统说无法战胜,但仍然知道与以前面临的情况非常不同。TI的比赛期间,OpenAI还设置了局域网比赛,让很多人参加,以各种方式与AI系统对战,共收集了1000多次比赛数据。最后,发现了很多系统的破裂,可以战胜它。主要有三种:士兵反击时,大大反击更有火力,让他们回来跑,AI方面的防御塔被士兵消耗死亡。

淬火珠风灵纹:销售这两种装备在一级时可以给予相当大的移动速度优势,可以慢慢获得AI的血液。有了这么好的开始战胜电脑就更容易了。

一级电影压力:用这台电脑需要很多技术,但根据OpenAI的不同意见,一些6-7k水平的玩家需要在短时间内按压3-5电影炮,在一级时杀死AI系统。以上是1v1比赛中的小错误,容易修复错误。但是,在5v5比赛中,这样的问题明显不是脆弱性,此时需要处理脑溢血和奇怪状况的系统。

最后,OpenAI回应还没有准备好对外发布研发的AI代理的明确格局,团队的重点是先解决问题5v5赛事。如果说1v1比赛很简单的话,5v5比赛子集,解决问题不会进一步推进AI的变革。OpenAI指出,更好的着手方式是不道德克隆。

Dota每天有近百万场公开赛,这些比赛的再生数据不会存储在Valve的服务器上两周。自去年11月以来,OpenAI仍在iTunes专家级玩家的再生数据中,已经收集了580万局游戏的数据(每局是10人参加的45分钟游戏)。

OpenAIDota2系统指出,如果有充分的计算,自我对局可以将机器学习系统的性能从远远高于人类的水平打破人类。在一个月的时间里,他们的系统无法与高水平的玩家相比,发展成打败顶级职业选手,之后也在提高。虽然有监管深度的自学系统不能和培训数据集一样好,但是在自我对局系统中,随着代理更好,能够使用数据不会自动提升。版权文章允许禁止发布。

下一篇文章发表了注意事项。


本文关键词:开云体育入口

本文来源:开云体育入口-www.wzjiahai.com

推荐新闻 MORE+

微信二维码 开云体育入口-APP下载微信二维码
联系我们

电话:400-123-4567
手机:11677767476
Q Q:703158099
邮箱:admin@wzjiahai.com
联系地址:广东省广州市天河区开云体育入口工业园88号

Copyright © 2003-2022 www.wzjiahai.com. 开云体育入口科技 版权所有

备案号:ICP备22523821号-8