2017年10月,DeepMind团队公布了最强版的AlphaGo Zero。经过短短3天的自我训练,AlphaGo Zero对此前战胜李世石的旧版AlphaGo的战绩是100:0。经过40天的自我训练,AlphaGo Zero又打败了AlphaGo Master版本。AlphaZero模型总体结构还是比较简单的,主要的部分是是蒙特卡洛搜索树MCTS和卷积神经网络CNN。AlphaZero模型不像早期的Alpha Go模型,采用监督学习策略网络和估值网络两个网络,而是只有一个网络,既是估值网络也是策略网络。它完全通过从随机初始状态开始进行自我对弈训练。并行训练多个网络,在每个检查点,基于当前最优的神经网络,评选出最优的网络用来生成训练数据。
思考:显然,对于规则简单的游戏世界,各大人工智能公司研发的算法基本已经战胜了人类,通过吸引世人的眼球,提高了公司的知名度。然后,面对真实的世界,简单的规则少之又少,很多问题的解决还需人们不断探索,人工智能还有很长的路要走。