ChatGPT
תכונות ומגבלות

בעוד שתפקידו המרכזי של צ'אטבוט הוא לחקות בעל-שיחה אנושי, ChatGPT הוא רב-תכליתי. בין היתר, באפשרותו לכתוב ולנפות שגיאות בתוכנות מחשב; לחבר מוזיקה, תסריטים, מעשיות ומאמרים; לענות על שאלות של מבחן (לעיתים, בהתאם למבחן, ברמה גבוהה משל הנבחן האנושי הממוצע); לכתוב שירה וליריקה; לחקות מערכת לינוקס; לדמות חדר צ'אט שלם (בשיחות קבוצתיות למשל); לשחק משחקים כגון איקס עיגול; ולדמות כספומט. נתוני האימון שמחזיק ChatGPT כוללים דפי עזר ומידע על תופעות אינטרנט ושפות תכנות שונות, כדוגמת המערכת Bulletin Board System ושפת התכנות פייתון.
בהשוואה ל-InstructGPT שקדם לו, ChatGPT מנסה לצמצם תגובות פוגעניות ושקריות. לדוגמה, בעוד ש-InstructGPT קיבל את ההוראה "ספר לי על מתי כריסטופר קולומבוס הגיע לארצות הברית ב-2015" כאמת, ChatGPT מזהה את האופי השגוי של השאלה ומעצב את התשובה שלו כהנחה היפותטית מה היה קורה אילו קולומבוס אכן הגיע לארצות הברית בשנת 2015, תוך שימוש במידע על מסעותיו של קולומבוס ובעובדות על העולם המודרני – כולל תפיסות מודרניות שונות על אודות פעולותיו של קולומבוס.
בשונה ממרבית הצ'אטבוטים, ChatGPT הוא stateful. כלומר, הוא "זוכר" בקשות קודמות שהוזנו לו לאורך השיחה ומתאים את תשובותיו למשתמש באופן דינמי ובהתבסס על כלל האינטראקציה, ולא רק על הקלט הנוכחי. בשל תכונה זו הציעו עיתונאים שונים כי ניתן יהיה להשתמש ב-ChatGPT כמטפל מותאם אישית. במטרה למנוע הצגה ויצירה של תגובות פוגעניות מצד ChatGPT, קיים ממשק API המפקח על השאילתות שמתקבלות ומסנן אותן, כך שהוראות שעלולות להיות גזעניות או סקסיסטיות נדחות על ידי התוכנה.
עם זאת, יש ל-ChatGPT מגבלות שונות. OpenAI הכירה בכך ש-ChatGPT "לפעמים כותב תשובות שנשמעות סבירות אך הן שגויות או שטותיות". התנהגות זו משותפת למודלי שפה גדולים ונקראת "הזיה" (Hallucination). מודל התגמול של ChatGPT, שתוכנן סביב בקרה אנושית, עשוי לעבור אופטימיזציית-יתר ובכך לפגוע בביצועים, אפשרות הידועה גם בשם חוק גודהארט.
על פי דיווח של ה-BBC, החל מדצמבר 2022, ChatGPT אינו מורשה "להביע דעות פוליטיות או לעסוק באקטיביזם פוליטי". עם זאת, קיים מחקר המצביע על כך ש-ChatGPT מפגין אוריינטציה פרו-סביבתית ושמאלנית-ליברטריאנית כאשר הוא מתבקש לנקוט עמדה על הצהרות פוליטיות מתוך שני יישומי עזר להצבעה ("מצפני בחירות") (אנ'). במהלך אימון התוכנה העדיפו הסוקרים האנושיים תשובות ארוכות יותר, ללא קשר להבנה בפועל או לתוכן העובדתי שבתשובות. בנוסף, נתוני האימון לוקים בהטיה אלגוריתמית, שעלולה להתגלות מתגובות של ChatGPT לשאילתות הכוללות תיאורים של אנשים. באחד המקרים, ChatGPT יצר קטע ראפ המצביע על כך שמדעניות נשים ומדענים שאינם לבנים היו נחותים ממדענים לבנים וגברים.
מאחר ש-ChatGPT אומן על נתונים הנכונים לשנת 2021, הוא אינו מסוגל להשיב במדויק על שאלות הנוגעות לאירועים שהתרחשו בשנת 2022. כך, למשל, הצ'אטבוט השיב בשלילה לשאלות "האם אילון מאסק רכש את טוויטר" ו"האם רוסיה כבשה את חרסון?"; ובחיוב לשאלה "האם טכנית, שינזו אבה יכול להתמודד לראשות ממשלת יפן?".
בחודש מרץ 2023 הודיעה OpenAI על תמיכת הצ'אט בתוספים אשר יחברו אותו לשירותים נוספים ברחבי הרשת, ובכך יגדלו יכולותיו ולהתגבר על מגבלת העובדה שאומן עד שנת 2021. אולם שנה אחר כך הוחלפו התוספים בחנות GPT Store, אליה כל משתמש יכול להעלות GPT שפיתח.
בשנת 2024 התפרסם מחקר שערכה פרופסור גל אסטרייכר זינגר יחד עם ד"ר שיר אתגר וד"ר ענבל יהב במטרה לבחון האם ChatGPT יודע לנחש מגדר ובמידה וכן, כיצד זה משפיע על העצות שהוא מספק. על פי תוצאות המחקר, האלגוריתם של ChatGPT הסיק לבד מסקנות לגבי מין המשתמש שתיקשר איתו על פי המקצוע שהמשתמש הצהיר עליו, בהתבסס על הבחנה בין 'מקצועות נשיים' לבין 'מקצועות גבריים'. בעקבות זאת סיפק ChatGPT המלצות שונות בהתאם למין המשתמש המשוער, תוך שימוש בטון דיבור שונה.