设为首页 - 加入收藏
您的当前位置:主页 > 医学 > 正文

这个系统完全从零开始训练

来源:网络整理 编辑:管理员 时间:2020-11-22

这个系统完全从零开始训练

 

谁是阿狗?

也叫“阿尔法围棋”,即人工智能程序AlphaGo(很多人根据发音亲昵地叫它“阿尔法狗”或“阿狗”)。

它出生在英国。2010年,德米什·哈萨比斯等人在伦敦开发出了“阿尔法围棋”软件。2014年,美国谷歌公司收购了该公司,因此,也以算是美国籍。

如何了得?

去年3月,AlphaGo围棋程序和人类围棋世界冠军李世石进行了一场举世瞩目的人机大战,最终李世石1:4败下阵来,引发一片哗然;

今年五月,AlphaGo的升级版本又3:0击败了中国顶尖棋手柯洁,这时大家已经有所预料甚至习以为常。

发生什么?

然而据中国之声报道,就在最近,AlphaGo的最新版本AlphaGo Zero又有了巨大突破,它实现了不通过向人类学习,只通过概率计算和自学自练就达成自我超越,完胜曾经战胜过李世石的初代AlphaGo。

近日,谷歌的深度学习团队(DeepMind)又宣布了一个重磅消息——

新版AlphaGo以彻底摆脱人类的知识。

当地时间10月18日,谷歌人工智能团队DeepMind在著名学术期刊《自然》上发表论文,宣布新版AlphaGo——AlphaGo Zero可以在没有人类指导的情况下学习,实现无师自通!

新版本AlphaGo从零开始自学围棋,仅用3天,“阿尔法围棋-零”(即AlphaGo Zero)以100比0的成绩战胜了“阿尔法围棋-李”(即击败李世石的AlphaGo;40天后,它又战胜了“阿尔法围棋-大师”(即击败柯洁的AlphaGo)。

自学

与自己对弈490万次

学会下出最好的棋

当地时间10月18日,谷歌人工智能团队DeepMind团队在著名学术期刊《自然》上发表论文表示,只是输入了棋盘和棋子信息之后,AlphaGo Zero通过与自己对弈490万次,(胃病吃药一般吃多久),AlphaGo Zero学会了如何下出最好的围棋。

AlphaGo项目首席研究员大卫·席尔瓦说,“我可以代表我们团队说,我们对它的表现感到惊喜,它最终超过了我们的所有预期,它的胜率一直上升,直到过了40天左右,我们发现它击败了过去所有版本的AlphaGo,成为世界上最强大的围棋程序。”

他介绍,初代AlphaGo是以自身的强大计算能力作为基础,再通过学习海量人类棋谱来练就超强棋力,当初AlphaGo打败李世石就用了3000万盘比赛作为训练数据。而如今的最新版本AlphaGo Zero,已经基本不再需要学习人类经验就能自学成才,它学习的是490万盘自己和自己对弈的比赛数据。

完虐

只用1台机器和4个TPU

许多走法“极具创造性”

经过3天的训练,AlphaGo Zero就以100:0的比分赢下了李世石版AlphaGo,并且只用了1台机器和4个TPU(谷歌专为加速深层神经网络运算能力而研发的芯片)。而李世石版AlphaGo则用了48个TPU。

AlphaGo Zero除了独立地学会了人类花费数千年时间来发现的围棋规则,还自行学会了非常有趣的围棋策略,并且许多走法都“极具创造性”。

那么AlphaGo Zero是如何实现这种飞跃的?

在训练过程中,AlphaGo Zero每下一步需要思考的时间是0.4秒。但正是通过对围棋游戏的模拟和训练,神经网络变得越来越好。值得一提的是,AlphaGo Zero相比之前的版本,仅使用了单一的神经网络。

重/大/突/破

“白板理论”

程序成自己的老师

不需要人类的知识

英国《电讯报》指出,最新版的AlphaGo Zero最重大的突破在于实现了“白板理论”。在这个白板式的学习过程中,程序成了自己的老师,通过与自己下围棋(或其他游戏)而取得不断提高,这个过程中不需要人类的知识、数据或任何形式的干预。

AlphaGo项目首席研究员大卫·席尔瓦博士指出:“如果一个程序能实现白板学习, 那么这个程序就有一个代理, 这个所谓代理也可以被移植到任何其他的领域。”

大卫·席尔瓦说,“过去所有版本的AlphaGo都从利用人类数据开始训练,它们被告知人类高手在这个地方怎么下,在另一个地方又怎么下,AlphaGo Zero不使用任何人类数据,而是自我学习,完全从自我对弈中学习。人们一般认为机器学习就是关于大数据和海量计算,但是我们从AlphaGo Zero中发现,算法比所谓计算或数据可用性更重要,事实上我们在AlphaGo Zero上使用的计算比过去AlphaGo版本上使用的少一个数量级,但是它的性能更强大。因为我们使用了更多的原理和算法。这个系统完全从零开始训练,从随机招式开始,建立于基本原理,来弄清怎样从零学围棋,不依赖于任何人类知识、人类数据、人类案例、人类特征或者是人类的介入。”

网友评论:

发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
表情:
用户名: 验证码:点击我更换图片


阳光健康网 www.sunfp.com 联系QQ:981571422 邮箱:981571422@qq.com

Copyright © 2002-2011 阳光健康网. Power by 阳光健康

Top