AlphaGo
AlphaGo Zeroのアルゴリズムをチェスと将棋にも応用したAlphaZeroについて書かれた論文「A general reinforcement learning algorithm that masters chess, shogi, and Go through self-play」の著者は以下のメンバーである。この論文では、著者のうち冒頭3名の貢献度が等価であると記されている。
デイビッド・シルバー / David Silver
トマ・ユベール / Thomas Hubert
ユリアン・シュリットヴィーザー / Julian Schrittwieser
イオアニス・アントノグロウ / Ioannis Antonoglou
マシュー・ライ / Matthew Lai
アーサー・ゲズ / Arthur Guez
マルク・ランクトー / Marc Lanctot
ローレン・シフレ / Laurent Sifre
ダルシャン・クマラン / Dharshan Kumaran
ソーレ・グリーペル / Thore Graepel
ティモシー・リリクラップ / Timothy Lillicrap
カレン・シモニャン / Karen Simonyan
デミス・ハサビス / Demis Hassabis
4代目バージョン。TPU4台を使用。
2017年10月に発表された。従来のバージョンとは大きく異なり、棋譜やビッグデータを必要とせず自己対局によって強化される。全くの初心者の状態から3日間の学習でAlphago Leeのレベルに到達し、21日目にAlphago Masterと肩を並べる。40日間の学習後、AlphaGo Leeには100戦全勝、AlphaGo Masterには100戦して89勝11敗と過去のバージョンを圧倒するレベルとなった。
AlphaGoの開発チームでさえ、AlphaGoがどのように石の配置を評価し次の手を選択しているかを指摘することはできない。モンテカルロ木探索もプログラムの推論効率を改善するための主要な方法として用いられている。
AlphaGoは、それ以前の囲碁プログラムから著しい発展を遂げた。その他の利用可能な囲碁プログラムと対局した500局で、AlphaGoは1局しか負けなかった。
2015年10月、ヨーロッパチャンピオンに勝利。さらに2016年3月には世界戦で18回優勝の経験のあるトップ棋士・李世乭九段(韓国)に4勝1敗と勝ち越す。そして2017年5月にはレーティングで当時世界トップ棋士だった中国の柯潔九段に3連勝を果たし、人類との対局から引退した。
2017年10月18日、過去の試合データを使わず、ビッグデータ不要で自己対局のみでスキルアップする新囲碁AI「AlphaGo Zero」を発表した。生まれてから40日後には、5月に世界最強棋士、柯潔九段を破った「AlphaGo Master」に完勝した。
2017年12月5日、AlphaGo Zeroのアプローチを汎化させ、囲碁以外のゲームにも対応できるようになったAlphaZeroを発表した。AlphaZeroは5000台のTPUを使用し、AlphaGo Zeroを8時間の学習で上回った。
初代バージョン。GPU176台を使用。
2015年10月、コンピュータ囲碁として初めてプロ棋士(樊麾 Fan Hui)に互先での勝利を収めた(5戦5勝)。