炼数成金 门户 商业智能 AlphaGo 查看内容

别了,AlphaGo之魂——黄士杰

2017-12-13 10:38| 发布者: 炼数成金_小数| 查看: 16737| 评论: 0|来自: 新智元

摘要: 12月寒冬的最冷一天,这条深夜的临别感言引爆了朋友圈,热闹喧嚣的讨论更映衬出一个时代终结的孤寂悲凉,黄士杰,一位精通围棋的AI工程师,他一手造就的AlphaGo,已经登峰造极,而他离去的身影,也或许窥见了人类的 ...

网络 工具 计算机 强化学习 AlphaGo DeepMind

12月寒冬的最冷一天,这条深夜的临别感言引爆了朋友圈,热闹喧嚣的讨论更映衬出一个时代终结的孤寂悲凉,黄士杰,一位精通围棋的AI工程师,他一手造就的AlphaGo,已经登峰造极,而他离去的身影,也或许窥见了人类的未来。大时代的一批传奇人物谢幕,他是寂寞的,自己培养的AI取代了他,如果一定要有一个人为AlphaGo的研究划上句点,黄士杰当之无愧。从AlphaGo第一次出现在公众视野时,黄士杰便是AlphaGo的较佳代言人。他抬手、落子,行机器之智能,走出一代大师风范。他冷静、他沉着,他是AlphaGo的“人肉臂”。时代的前进脚步从不停歇,人工智能的盛世爆发正在来临,“人肉臂”黄士杰转岗,对AlphaGo深情的告别,都是在 AI围棋的里程碑上落下绚烂的一笔。

针对未来发展方面,黄士杰表示,DeepMind 有兴趣的领域除了围棋之外,还有‘医疗’跟‘机器人’,希望能够让世界变得更美好,至于他自己个人的下一步,当然就是选一个有兴趣的领域去投入。现场有媒体再次询问下一个目标是不是挑战《星海争霸》、《英雄联盟》这个模拟策略游戏领域,黄士杰并没有把话说死,表示:“内部还在讨论”。

11月27日,黄士杰在Facebook转发了一则关于DeepMind将与一些顶尖的研究机构共同投入诊断乳腺癌的AI研究消息。DeepMind将利用的机器学习技术,希望能够快速、准确地检测出癌症的迹象,帮助医生尽早发现癌症,以便更早的有效治疗,此举或许能捕风捉影体会到黄士杰之后的动态走向。

黄士杰,他就是AlphaGo本身
黄士杰出生于台湾,1997考入台湾国立交通大学就读大学本科,专业为计算机与信息科学。2001年到2003年,在国立台湾师范大学就读计算机科学和信息工程硕士。2004年到2011年在国立台湾师范大学完成了博士学业,博士论文就是“应用于电脑围棋之蒙地卡罗树搜索法的新启发式演算法”。

黄士杰专精于人工智慧领域,硕博士论文都在台师大资工所教授林顺喜指导下完成,据其导师林顺喜回忆,黄士杰是个很努力的学生,对围棋也非常有兴趣,是台师大围棋社创社社长,就读时就有围棋业余6段的资格。

林顺喜透露,黄士杰的博士本来5年就可念完,但为了延续研发成果,多念了2年,博士班7年级时,他所开发的围棋程式“Erica”击败了当时国际公认的最强程式“Zen”,并在日本举办的国际电脑奥林匹亚中拿下19路电脑围棋推荐。

黄士杰博士毕业后在加拿大艾伯塔大学做了一年研究员,随后于2012年加入DeepMind,担任高级研究员。2014年1月26日,谷歌以5亿美元收购了这家日后将会大放异彩的公司。自此,黄士杰在谷歌DeepMind任研究科学家。同年2月,AlphaGo项目正式启动,团队只有3个人:哈萨比斯、席尔瓦、黄士杰。

项目启动伊始,团队就决定将沿着深度学习和强化学习的方向探索。无疑,这条道路将无比艰难。然而,他们还是上路了。

2014年6月,AlphaGo通过卷积神经网络学习了很多人类棋谱,能在3毫秒内做出堪比人类的下棋直觉。黄士杰将它命名为“策略网络”,并在GPU上进行持续的训练优化。
一年之后,AlphaGo阅读棋局的能力提升了很多,可以检索多种局面变化,并且找到较佳的应对方式,可以算出后续40-60步棋。

自此,有越来越多的深度学习专家加入了这个一开始只有三人的团队。8月,AlphaGo将掌握称霸围棋世界最关键的能力:形势判断。AlphaGo通过自我对弈,训练出价值网络,进而可以判断每一手棋背后代表的胜率。这就形成了形势判断的能力。据黄士杰回忆,他当时已经感觉到AlphaGo的强大。10月,樊麾大战AlphaGo,当时代替AlphaGo落子的正是黄士杰。樊麾输了。但这一消息当时并未被公布。

2016年1月27日,Nature杂志介绍了DeepMind团队的AlphaGo,以及樊麾输了的消息。黄士杰与席尔瓦是这篇论文的第一作者。

又过了2个月,AlphaGo击败了李世乭。这次,依旧是黄士杰代替AlphaGo落子。这也是黄士杰第一次出现在观众的眼前。

这年年底,一个叫Master的棋手大开杀戒,连续斩杀各路围棋高手。取得59场连胜之后,Master公布了自己的真实身份:“我是AlphaGo的黄博士”。黄士杰,又是黄士杰。

2017年5月23日,柯洁对面坐的,仍然是黄士杰。在对战结束后,柯洁说,“黄博士来摆棋,可能更让我有和AI对战的感觉。我也特别佩服黄博士,大家看直播也能看到我很爱动,总喜欢活动身体,而黄博士总是一动不动,不上厕所、不喝水、也不吃东西……所以跟黄博士下棋时,我觉得黄博士就是AlphaGo。”

AlphaGo一路厮杀,黄士杰始终在侧,甚至可以说,他就是AlphaGo本身。

AlphaGo 小传
姓名:AlphaGo(Fan,Lee,Master,Zero)
别名:阿老师,阿尔法狗
生日:2014年
出生地:英国伦敦

1、击败樊麾
2015年10月,AlphaGo击败樊麾,成为第一个无需让子即可在19路棋盘上击败围棋职业棋手的电脑围棋程序,写下了历史,相关成果在2016年1月发表于Nature

2、击败李世石
2016年3月,AlphaGo在一场五番棋比赛中4:1击败尖端职业棋手李世石,成为第一个不借助让子而击败围棋职业九段棋手的电脑围棋程序,再创历史。五局赛后韩国棋院授予AlphaGo有史以来第一位名誉职业九段

3、排名短暂超越柯洁
2016年7月18日,AlphaGo在Go Ratings网站的排名升至世界第一。但几天之后被柯洁反超。

4、Alpha Go化名“Master” 60连胜
2016年的倒数第三天,一个用户名为“Master”的围棋用户,连续在围棋平台大开杀戒,“斩杀”包括柯洁、朴廷桓、井山裕太、陈耀烨、申真谞、常昊、古力等各路围棋高手,最终以以60连胜告终。柯洁连输三场,期间还因为急性肠胃炎住院……
在第59场时候,“Master”自报家门:“我是AlphaGo的黄博士”。
 
5、AlphaGo大败柯洁,柯洁落泪哽咽
2017年5月27日,乌镇围棋峰会,柯洁总比分 0:3 败于AlphaGo。比赛中,柯洁在局面不利时长时间离开,回来后又泪洒现场。赛后柯洁一度哽咽称:它太完美我很痛苦,看不到任何胜利的希望。
 
6、AlphaGo Zero横空出世 自学21天虐Master
 2017年10月,DeepMind版AlphaGo论文介绍了迄今最强的版本AlphaGo Zero:使用纯强化学习,将价值网络和策略网络整合为一个架构,3天训练后就以100比0击败了上一版本的AlphaGo。
 
7、AlphaGo教学工具正式上线,柯洁:重新学习围棋
2017年12月11日,AlphaGo的启蒙老师、欧洲围棋冠军樊麾在微博上透露:“AlphaGo教学工具共有两万多个变化,三十七万多步棋组成,通过AlphaGo的视角,分析并建议围棋开局的诸多下法。随后,当今世界围棋第一人柯洁随后转发此条微博,并评论到:“重新学习围棋。”
 
AlphaGo已经退休,但技术永存。
 
谨以此文,致敬AlphaGo,以及研发AlphaGo的人。

欢迎加入本站公开兴趣群
商业智能与数据分析群
兴趣范围包括各种让数据产生价值的办法,实际应用案例分享与讨论,分析工具,ETL工具,数据仓库,数据挖掘工具,报表系统等全方位知识
QQ群:81035754

鲜花

握手

雷人

路过

鸡蛋

相关阅读

最新评论

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

热门文章

     

    GMT+8, 2018-12-12 20:48 , Processed in 0.206545 second(s), 24 queries .