AlphaGo

AlphaGo היא תוכנת מחשב, שמשחקת במשחק הקופסה Go. התוכנה פותחה על ידי חברת DeepMind Technologies, שבהמשך נרכשה על ידי חברת חברת גוגל. פיתוח התוכנה החל בשנת 2014. מאז יוצרו מספר גרסאות של התוכנה, בין היתר כאלו שהתחרו מול שחקני Go מקצועיים. למשל גרסה בשם Master שזכתה להצלחה רבה . לאחר שפרש ממשחק תחרותי, AlphaGo Master הוחלף על ידי גרסה חזקה יותר המכונה AlphaGo Zero  אשר הייתה אוטודידקטית לחלוטין – כלומר למדה לשחק מבלי ניתוח של משחקים אנושיים. AlphaGo Zero הוחלפה מאוחר יותר בתוכנת AlphaZero, ששיחקה משחקים נוספים מלבד Go, כולל שחמט ושוגי. בשנת 2019 יצאה גרסה מתקדמת יותר בשם MuZero  שביכולתה ללמוד לשחק באותם משחקים מבלי לדעת מראש את כללי המשחק.

AlphaGo משתמשת באלגוריתם חיפוש מונטה קרלו בעצים  על מנת למצוא את מהלכיה על סמך ידע שנרכש בעבר תוך שימוש בלמידת מכונה שנשענת על רשת עצבית מלאכותית. הרשת העצבית מאומנת לזהות את המהלכים הטובים ביותר ואת אחוזי הזכייה של המהלכים הללו. רשת עצבית זו משפרת את יעילות החיפוש בעץ, וכתוצאה מכך בחירת מהלכים נעשית טובה יותר מאיטרציה לאיטרציה.

באוקטובר 2015, תוכנת AlphaGo התחרתה מול שחקן ה-Go פאן חוי  וניצחה. בכך הפכה התוכנה לראשונה שהצליחה לנצח שחקן Go מקצועי ללא פיצוי  ועל לוח משחק מלא בגודל 19 על 19. במרץ 2016, התוכנית ניצחה את שחקן ה-Go המקצועי לי סידול  בתחרות שכללה חמישה משחקים  בתוצאה של 1–4. בכך הפכה התוכנה לראשונה שהצליחה לנצח שחקן Go בדרגת דאן 9 ללא פיצוי. על ניצחון זה צולם סרט בשם AlphaGo. ב-22 בדצמבר 2016, הניצחון של AlphaGo נבחר על ידי Science כאחת מפריצות השנה.

במאי של 2017, הגרסה AlphaGo Master ניצחה עם תוצאה של 1–2 את השחקן קה גיי  שנכון לקיום המשחק דורג ראשון בעולם. בעקבות ניצחון זה העניקה התאחדות הגו הסינית  לתוכנה דרגת דאן 9. לאחר הניצחון על קה גיי, הושקה AlphaGo Zero שלומדת לשחק באופן אוטודידקטי. AlphaGo Zero השיג ניצחון 100–0 מול גרסת ה-Master. יורשו של AlphaGo Zero בשם AlphaZero נתפס נכון לשנת 2019 כשחקן בעל הדירוג הגבוה ביותר ב-Go ואולי גם בשחמט.

 היסטוריה 
Go הוא משחק בעל כמות המשכים אפשריים גדולה מאוד אחרי כל מהלך. עובדה זו מקשה מאוד על המחשבים ללמוד את המשחק על ידי מתודות למידת המכונה המוכרות כמו גיזום אלפא-ביתא ושיטת היוריסטיקה.

בשנת 1997 DeepBlue, מחשב של יבמ, ניצח את אלוף העולם בשחמט, גארי קספרוב. כמעט שנתיים לאחר מכן, תוכנות המחשב החזקות ביותר ששיחקו Go הגיעו רק לרמה חובבנית (דאן 5 ומטה) ועדיין לא יכלו לנצח שחקני Go מקצועיים ללא פיצוי בתחילת המשחק.

בשנת 2012, התוכנה Zen הצליחה לנצח פעמיים את מאסאקי טאקאמיה  שדירוגו היה דאן 9. עם זאת ניצחון זה הושג עם פיצוי של 4–5 אבנים לטובת התוכנה. בשנת 2013 התוכנה Crazy Stone ניצחה את יושיאו לשידא  שהיה בעל דאן 9. גם במקרה זה הניצחון הושג עם פיצוי של 4 אבנים לטובת התוכנה.

 המשחק מול פאן חוי 
באוקטובר של שנת 2015, הגרסה הקיימת של AlphaGo ניצחה 0–5 את אלוף אירופה, פאן חוי (Fan Hui). דירוגו נכון לזמן המשחק היה דאן 2 (מתוך 9). זאת הייתה הפעם הראשונה בה תוכנת מחשב ניצחה שחקן Go מקצועי על לוח משחק מלא וללא פיצוי לטובת התוכנה. פרסום תוצאות המשחק התרחש רק בינואר 2016, במקביל לפרסום מאמר בכתב העת המדעי Nature המתאר את אלגוריתם הלמידה בו השתמשה התוכנה.

 המשחק מול לי סידול 
בשנת 2016, בתאריכים 9, 10, 12, 13 ו-15 במרץ, במלון ארבע העונות בסיאול, נערכו חמישה משחקים בין AlphaGo לבין שחקן ה-Go הדרום קוראני המקצועי לי סידול. נכון לזמן התחרות דירוגו היה דאן 9 (מתוך 9). המשחקים שודרו בשידור חי בכלי תקשורת רבים. AlphaGo ניצחה את לי בארבעה מתוך חמשת המשחקים: בשלושת המשחקים הראשונים ובמשחק החמישי. במשחק הרביעי הצליח לי לגבור על AlphaGo. המשחק היחיד בו ניצח לי הפך אותו לאדם היחיד בעולם שניצח אי-פעם את AlphaGo מתוך כל 74 משחקיה הרשמיים.

AlphaGo רצה על גבי הענן של גוגל תוך שימוש בשרתים הממוקמים בארצות הברית. המשחק עשה שימוש בחוקים סיניים עם 7.5 נקודות קומי , ולכל צד היו שעתיים של חשיבה בתוספת שלוש תקופות ביויומי  של 60 שניות. הגרסה של AlphaGo ששיחקה נגד לי השתמשה בכמות מחשוב דומה כמו שהייתה בשימוש במשחק מול פאן חוי. AlphaGo לא אומנה באופן ספציפי לנצח את לי (כלומר לא אומנה ספציפית נגד סגנון המשחק של לי), אלא אומנה באופן כללי, ללא מטרה ספציפית לנצח אדם ספציפי.

הפרס בתחרות היה מיליון דולר. מכיוון ש-AlphaGo זכתה בארבעה מתוך חמשת המשחקים בסדרה, הפרס נתרם לעמותות, כולל יוניסף. לי קיבל 150 אלף דולר על השתתפות בכל חמשת המשחקים ותוספת של 20 אלף דולר עבור זכייתו במשחק 4.

ביוני 2016, בכנס שהתקיים באחת האוניברסיטאות בהולנד, חשף אג'ה הואנג, חבר בצוות DeepMind, כי הם זיהו ותיקנו את נקודת התורפה של AlphaGo שגרמה לתוכנה להפסיד ללי במהלך המשחק הרביעי ביניהם.

 60 משחקים ברשת 
ב־29 בדצמבר 2016, חשבון חדש בשרת תיג'ים  בשם "מגיסטר" (שהוצג כ 'מגיסט' בגרסה הסינית של השרת) מדרום קוריאה החל לשחק משחקים עם שחקנים מקצועיים. החשבון שינה את שמו ל-"Master" ב־30 בדצמבר, ואז עברה לשרת FoxGo ב-1 בינואר 2017. ב-4 בינואר אישרה DeepMind כי "Magister" ו-"Master" הם חשבונות בהם משחקת הגרסה המעודכנת של AlphaGo, הנקראת AlphaGo Master. החל מה - 5 בינואר 2017, AlphaGo Master קבע שיא של 60 ניצחונות ו-0 הפסדים, כולל שלושה ניצחונות על השחקן בעל הדירוג הגבוה ביותר נכון לזמן המשחק, קה גיי. לאחר שנודע על ההפסדים של גיי לתוכנת המאסטר, שחקן ה-Go גו לי  הציע סכום של 100,000 יואן (14,400 דולר) לשחקן האנושי הראשון שיכול להביס את מאסטר.

במהלך שישים המשחקים ברשת, המאסטר שיחק בקצב של 10 משחקים ביום. רבים חשדו במהרה שמדובר בשחקן AI בגלל מנוחה מועטה בין המשחקים. יריביו כללו אלופי עולם רבים. כל 60 המשחקים פרט לאחד היו משחקים מהירים עם שלושה ביויומיים באורך 20 או 30 שניות. המאסטר הציע להאריך את הביויומי לדקה כאשר שיחק עם ני ווייפינג בהתחשב בגילו. לאחר שניצח במשחקו ה-59, מאסטר חשף את עצמו בחדר הצ'אט.

לאחר השלמת המשחקים הללו, מייסד שותף של Google DeepMind, דמיס הסביס, אמר: "אנו מצפים לשחק בהמשך כמה משחקים רשמיים באורך מלא בשיתוף ארגוני Go ומומחים".

מומחי Go התרשמו מביצועי התוכנית וסגנון המשחק הלא אנושי שלה; קה גיי הצהיר כי "אחרי שהאנושות השקיעה אלפי שנים בשיפור הטקטיקה שלה, מחשבים אומרים לנו שבני אדם טועים לחלוטין ... הייתי מרחיק לכת ואומר שאף בן אדם לא נגע בקצה האמת של Go".

 פסגת גו של 2017 
בתחרות הגו שנערכה בווז'ן במאי 2017, AlphaGo Master שיחק שלושה משחקים עם קה גיי (Ke Jie), השחקן המדורג במקום הראשון בעולם, כמו גם שני משחקים עם כמה שחקנים מקצועיים מובילים: משחק נגד זוג שחקנים ומשחק נגד צוות של חמישה שחקנים אנושיים.

Google DeepMind הציעה פרס של 1.5 מיליון דולר לזוכה בטורניר שלושת המשחקים בין Ke Jie ו-Master בעוד שהצד המפסיד יקבל 300,000 דולר. מאסטר ניצח את שלושת המשחקים נגד Ke Jie, ולאחריהם הוענקה דרגת דאן 9 (הדרגה הגבוה ביותר ב-Go) מקצועי על ידי התאחדות הגו הסינית ל-AlphaGo.

לאחר שניצחה את שלושת המשחקים שלה מול Ke Jie, שחקן ה-Go העולמי המדורג ביותר, הוכרז כי AlphaGo פורש, ו-DeepMind פרקה את הצוות שעבד על המשחק כדי להתמקד במחקר AI בתחומים אחרים. עם זאת, לאחר הפסגה פרסם צוות DeepMind כ-50 משחקי AlphaGo נגד עצמו באורך מלא, כמתנה לקהילת שחקני ה-Go.

 AlphaGo Zero ו-AlphaZero 
ב-19 באוקטובר 2017 הצוות של AlphaGo פרסם מאמר בכתב העת Nature, בו הציג את AlphaGo Zero, גרסה ללא נתונים אנושיים וחזקה יותר מכל גרסה קודמת שמנצחת אלוף אנושי. בכך שהיא שיחקה משחקים נגד עצמה, AlphaGo Zero עלתה על כוחה של AlphaGo Lee תוך שלושה ימים בכך שניצח 100 מתוך 100 משחקים, הגיעה לרמה של מאסטר בגו תוך 21 יום, וניצחה את כל הגרסאות הישנות תוך 40 יום.

במאמר שפורסם ב-arXiv ב-5 בדצמבר 2017, טען צוות DeepMind כי היא הכליל את גישתו של AlphaGo Zero לאלגוריתם יחיד של AlphaZero, שהשיג תוך 24 שעות רמה של משחק על אנושי במשחקי השחמט, השוגי ו-Go על ידי ניצחון על התוכנות המובילות בתחומיהן Stockfish, Elmo, ו-AlphaGo Zero.

 כלי הוראה 
ב־11 בדצמבר 2017, פרסם צוות DeepMind כלי להוראת גו שמבוסס על AlphaGo באתר האינטרנט שלה. הכלי מציג ללומדים את הסתברות הניצחון שמייצג על מהלך במשחק כפי שחושב על ידי AlphaGo Master. כלי ההוראה אוסף 6,000 מהלכי Go מ-230,000 משחקים אנושיים שכל אחד מהם נותח עם 10,000,000 סימולציות על ידי AlphaGo Master. רבים מהמהלכים כוללים הצעות למהלך אנושי.

 גרסאות 
גרסה מוקדמת של AlphaGo נבדקה על חומרה עם מספר שונה של מעבדים ו-GPUs, הפועלים במצב אסינכרוני או מבוזר. שתי שניות של זמן חשיבה ניתנו לכל מהלך. ציוני מד-כושר (דירוגי Elo) המתקבלים מפורטים להלן. כצפוי, במשחקים בהם יש יותר זמן לכל שחקן, משיגה התוכנה דירוגים גבוהים יותר.

+תצורה וביצועים תְצוּרָהמספר
תהליכונים מספר המעבד מספר GPU דירוג Elo יחיד עמ ' 10–11 40 48 1 2,181 יחיד 40 48 2 2,738 יחיד 40 48 4 2,850 יחיד 40 48 8 2,890 מופץ 12 428 64 2,937 מופץ 24 764 112 3,079 מופץ 40 1,202 176 3,140 מופץ 64 1,920 280 3,168
במאי 2016 חשפה גוגל חומרה קניינית משלה המכונה "יחידות עיבוד טנזור" או TPU. לפי הפרסום, רכיבים אלה כבר יושמו לשימוש במספר פרויקטים פנימיים בגוגל, כולל המשחק AlphaGo נגד לי סידול.

בפסגת העתיד של Go במאי 2017, DeepMind חשפה כי הגרסה של AlphaGo ששימשה בפסגה זו הייתה AlphaGo Master, וגילתה שהיא מדדה את חוזק הגרסאות השונות של התוכנה. AlphaGo Lee, הגרסה המשמשת נגד Lee, יכולה לנצח את AlphaGo Fan, הגרסה ששימשה במשחקים נגד פן חוי.
+תצורה ועוצמה גרסאות חוּמרָהדירוג Elo תַאֲרִיך תוצאות אוהד AlphaGo 176 GPUs, מופצים3,144 אוקטובר 2015 5: 0 נגד פאן הוי AlphaGo Lee 48 TPUs, מופץ3,739 מרץ 2016 4: 1 נגד לי סידול מאסטר AlphaGo 4 TPU, מכונה אחת4,858 מאי 2017 60: 0 נגד שחקנים מקצועיים; העתיד של פסגת גו AlphaGo Zero (40 חסימות) 4 TPU, מכונה אחת5,185 אוקטובר 2017 100: 0 נגד AlphaGo Lee
89:11 נגד AlphaGo Master AlphaZero (20 חסימות) 4 TPU, מכונה אחת5,018 דצמבר 2017 60:40 נגד AlphaGo Zero (20 חסימות)

 אלגוריתם 
החל משנת 2016, האלגוריתם של AlphaGo משתמש בשילוב של טכניקות למידת מכונה וחיפוש עצים, בשילוב אימונים נרחבים, הן ממשחק אנושי והן ממחשב. היא משתמשת בחיפוש עצים בשיטת מונטה קרלו, המונחית על ידי "רשת ערכים" ו"רשת מדיניות", שניהם מיושמים באמצעות טכנולוגיית רשת עצבית עמוקה. כמות מוגבלת של עיבוד מקדים של זיהוי תכונות ספציפיות למשחק (למשל, כדי להדגיש אם מהלך תואם לתבנית nakade) מוחל על הקלט לפני שהוא נשלח לרשתות העצביות.

הרשתות העצביות של המערכת הושקו בתחילה על בסיס מומחיות משחק אנושית. בתחילה הוכשרה AlphaGo לחקות משחק אנושי על ידי ניסיון להתאים למהלכים של שחקנים מומחים ממשחקים היסטוריים מוקלטים, תוך שימוש במאגר של כ-30 מיליון מהלכים. לאחר שהגיעה לרמה מסוימת של יכולת, היא הוכשרה בהמשך לשחק מספר רב של משחקים מול עצמה, תוך שימוש בלמידת חיזוק לשיפור המשחק שלה. כדי להימנע מבזבוז זמנו של היריב "מטעמי כבוד", התוכנה מתוכנתת להיכנע אם הערכת ההסתברות שלה לזכות נופלת מתחת לסף מסוים; למשחק נגד לי, סף הכניעה נקבע להסתברות ניצחון של 20%.

 סגנון המשחק 
טובי מאנינג, שופט המשחק של AlphaGo vs. Fan Hui, תיאר את סגנון המשחק של התוכנה כ"שמרני". סגנון המשחק של AlphaGo תומך באופן מובהק בהסתברות גדולה יותר לזכות בפחות נקודות לעומת בהסתברות נמוכה יותר לזכות בנקודות רבות יותר. האסטרטגיה שלה למקסם את הסיכוי שלה לזכות נבדלת ממה שהשחקנים האנושיים נוטים לעשות שהוא למקסם את הרווחים הטריטוריאליים, ומסבירה כמה מהמהלכים המוזרים למראה. גישה זו מובילה למהלכי פתיחה רבים שמעולם או לעיתים רחוקות נעשו על ידי בני אדם, תוך הימנעות מוחלטת ממהלכי פתיחה רבים מהשורה השנייה ששחקנים אנושיים אוהבים לבצע. התוכנה נוטה להשתמש shoulder hits, במיוחד אם היריב מרוכז יתר על המידה.

 תגובות לניצחון ב-2016 
 קהילת הבינה המלאכותית 
הניצחון של AlphaGo במרץ 2016 היה אבן דרך מרכזית במחקר הבינה המלאכותית. לפני כן, Go נחשב כבעיה קשה בלמידת מכונה שהייתה צפויה להיות מחוץ להישג יד לטכנולוגיה של אז. רוב המומחים חשבו שתוכנית Go חזקה כמו AlphaGo נמצאת במרחק של חמש שנים לפחות; חלק מהמומחים חשבו שייקח לפחות עשור נוסף עד שהמחשבים ינצחו את אלופי הגו. רוב הצופים בתחילת המשחקים ב-2016 ציפו כי לי ינצח את AlphaGo.

עם משחקים כמו דמקה (ש"נפתרה" על ידי הצוות שפיתח את צ'ינוק), שחמט, וכעת גם גו בהם מחשבים הפכו בלתי מנוצחים, ניצחונות במשחקי לוח פופולריים כבר לא יכולים לשמש אבני דרך מרכזיות לבינה מלאכותית באופן שבו היו בעבר. מוריי קמפבל, מהיוצרים של Deep Blue כינה את הניצחון של AlphaGo "סוף עידן ... משחקי לוח הם פחות או יותר פתורים וזה הזמן לעבור הלאה."

בהשוואה ל-Deep Blue או Watson, האלגוריתמים הבסיסיים של AlphaGo הם כלליים יותר ועשויים להוות עדות לכך שהקהילה המדעית מתקדמת לעבר בינה מלאכותית כללית. יש פרשנים שמאמינים כי הניצחון של AlphaGo מהווה הזדמנות טובה לחברה להתכונן להשפעה עתידית אפשרית של מכונות בעלות אינטליגנציה כללית. כפי שציין היזם גיא סוטר, AlphaGo יודעת רק לשחק ב-Go ואינה מחזיקה באינטליגנציה למטרות כלליות; "[זה] לא יכול פשוט להתעורר בוקר אחד ולהחליט שזה רוצה ללמוד להשתמש בנשק חם. חוקר ה-AI סטיוארט ראסל אמר כי מערכות בינה מלאכותית כמו AlphaGo התקדמו מהר יותר והפכו לחזקות מהצפוי, ולכן אנחנו צריכים לפתח שיטות להבטיח שהם "יישארו תחת שליטה אנושית". מספר חוקרים, כמו סטיבן הוקינג, הזהירו (במאי 2015 לפני המשחקים) כי חלק מהבינה המלאכותית המשפרת את עצמה עשויה להשיג אינטליגנציה כללית, ולהוביל להשתלטות בלתי צפויה של AI;חוקרים אחרים לא מסכימים: מומחה ה-AI, ז'אן גבריאל גנסקיה, סבור ש"דברים כמו 'שכל ישר' ... אולי לעולם לא יינתנו לשחזור [אצל מכונות]", ואומר "אני לא מבין למה לדבר על פחדים. להפך, זה מעלה תקווה בתחומים רבים כמו בריאות וחקר החלל." מדען המחשבים ריצ'רד סאטון אמר "אני לא חושב שאנשים צריכים לפחד... אבל אני חושב שאנשים צריכים לשים לב."

בסין, AlphaGo היה רגע המעבר שעזר לשכנע את ממשלת סין לתעדף ולהגדיל באופן דרמטי את המימון לבינה מלאכותית.

בשנת 2017 צוות AlphaGo ב-DeepMind קיבל את מדליית IJCAI מרווין מינסקי המיועדת להישגים יוצאי דופן בבינה מלכותית. "AlphaGo הוא הישג נפלא, ודוגמה מושלמת למה שמדליית מינסקי נועדה לקדם", אמר פרופסור מייקל ווולדריג ', יו"ר ועדת פרסי IJCAI. "מה שהרשים במיוחד את IJCAI היה ש - AlphaGo משיגה את מה שהיא עושה באמצעות שילוב מבריק של טכניקות AI קלאסיות, כמו גם טכניקות לימוד מכונה משוכללות ש - DeepMind קשורה אליהן כל כך. זו הפגנה עוצרת נשימה של AI עכשווי, ואנחנו שמחים להיות מסוגלים להכיר בו בפרס זה."

 קהילת הגו 
גו הוא משחק פופולרי בסין, ביפן ובקוריאה ובמשחקים ב-2016 צפו בהערכה מאה מיליון איש ברחבי העולם. שחקני Go מובילים רבים אפיינו את המהלכים הלא שגרתיים של AlphaGo כמהלכים שנראים מפוקפקים בהתחלה, אך היו הגיוניים בדיעבד: "כל שחקני ה-Go מלבד הטובים ביותר מעצבים את סגנונם על ידי חיקוי של שחקני הצמרת. נראה כי ל-AlphaGo יש מהלכים מקוריים לחלוטין שהוא יוצר בעצמו. " נראה כי באופן מפתיע, AlphaGo התחזקה הרבה יותר, אפילו בהשוואה למשחק באוקטובר 2015 , שם מחשב ניצח שחקן גו מקצועי לראשונה ללא יתרון (חוקים רגילים). יום אחרי התבוסה הראשונה של לי, ג'ונג אהרם, כתב הגו הראשי של אחד העיתונים היומיים הגדולים של דרום קוריאה, אמר "אמש היה קודר מאוד ... אנשים רבים שתו אלכוהול." התאחדות הגו של דרום קוריאה (Korea Baduk Association), העניקה ל-AlphaGo תואר דאן 9 של כבוד "על הצגת כישורים מבריקים, יצירתיות ועל קידום המשחק".

קה גיי הסיני, צעיר בן 18 שהוכר כשחקן הגו הטוב ביותר בעולם באותה תקופה, טען בתחילה כי הוא יצליח לנצח את אלפא גו, אך סירב לשחק נגדו מחשש שהוא "יעתיק את הסגנון שלי". כשהתקדמו המשחקים, קי ג'י חזר בו ואמר כי "סביר ביותר שאוכל להפסיד" לאחר ניתוח שלושת המשחקים הראשונים, אך חזר לו הביטחון לאחר ש - AlphaGo הראה חולשות במשחק הרביעי.

טובי מאנינג, שופט המשחק של אלפא-גו נגד פאן חוי, והג'ין לי, מזכ"ל הפדרציה הבינלאומית של גו, סבורים כי בעתיד, שחקני גו יקבלו עזרה ממחשבים כדי ללמוד מה הם עשו לא נכון במשחקים וכדי לשפר את הכישורים שלהם.

לאחר המשחק השני לי אמר שהוא "ללא מילים": "כבר מתחילת המשחק, לא הצלחתי להשיג יתרון אפילו לא במהלך אחד. זו הייתה שליטה מוחלטת של AlphaGo." לי התנצל על הפסדיו, ואמר לאחר המשחק השלישי ש"הערכתי לא נכון את היכולות של AlphaGo והרגשתי חסר אונים. הוא הדגיש כי התבוסה היא "תבוסתו של לי ס'דול ולא תבוסה של האנושות". לי אמר שהפסד בסופו של דבר למכונה היה "בלתי נמנע" אך ציין כי "רובוטים לעולם לא יבינו את יופיו של המשחק באותה צורה שאנחנו בני האדם מבינים." לי כינה את ניצחונו במשחק הרביעי כ"זכייה יקרה מפז שלא הייתי מחליף בשום דבר".

 מערכות דומות 
פייסבוק גם עבדה על מערכת משלה שמשחקת גו שנקראת "יער אפל", שגם היא מבוססת בין השאר על למידת מכונה אף על פי שהמערכת של פייסבוק ניצחה תוכנות גו אחרות במחשב, נכון לתחילת 2016 היא עדיין לא ניצחה שחקן אנושי מקצועי.

מערכת שפותחה בשיתוף אוניברסיטת טוקיו, הפסידה 2–1 בנובמבר 2016 למאסטר ה-Go צ'ו צ'יקון, המחזיק בשיא המספר הגדול ביותר של זכיות גו ביפן.

מאמר שפורסם ב - ב-2018 ציין שהתשתית של AlphaGo משמשת כבסיס למערכת חדשה לתכנון והערכה של מולקולות לשימוש כתרופות פוטנציאליות.

 ראו גם 
 למידת חיזוק מרובת סוכנים
 כחול עמוק - תוכנת מחשב שניצחה את אלוף העולם בשחמט גארי קספרוב

לקריאה נוספת
 מרכוס דו סוטוי, תוכנת היצירתיות, תרגמה: מיכל קירזנר-אפלבוים, ספרי עליית הגג וידיעות ספרים, 2022, הפרק "מוכנים, היכון, גו!", עמ' 31–59

קישורים חיצוניים

 הערות שוליים 

קטגוריה:ערכים שבהם תבנית אתר רשמי אינה מתאימה להוספה אוטומטית
קטגוריה:גוגל
קטגוריה:תוכנות בינה מלאכותית
קטגוריה:תוכנות שהושקו ב-2015
קטגוריה:דפים עם תרגומים שלא נסקרו