GPT-4

GPT-4 (Generative Pre-trained Transformer 4) — OpenAI әзірлеген мультимодальды үлкен тілдік модель, GPT сериясының төртінші нұсқасы. 2023 жылғы 14 наурызда жарияланды және ChatGPT Plus пайдаланушыларына қолжетімді. Microsoft компаниясы GPT негізінде жұмыс істейтін Bing-тің кейбір нұсқалары ресми таныстырылымға дейін GPT-4 моделін пайдаланғанын растады. Трансформер архитектурасына негізделген GPT-4 келесі токенді болжауға алдын ала оқытылды (ашық деректер мен «үшінші тараптардан лицензияланған деректерді» қоса отырып), кейінірек адамдық кері байланысқа негізделген күшейтілген оқыту әдісі арқылы жетілдірілді.

GPT-4 жөніндегі техникалық есепте модельдің параметрлер саны әдейі көрсетілмеген, бұл шешім «ірі үлгілер саласындағы бәсекелестік орта және қауіпсіздік салдары» арқылы түсіндірілген. The Verge жариялаған қауесеттерге сәйкес, GPT-4 параметрлер санын GPT-3 үлгісіндегі 175 миллиардтан 100 триллионға дейін ұлғайтады делінген, алайда OpenAI бас директоры Сэм Альтман мұны «толықтай сандырақ» деп атады. Кейін пайда болған өзге болжамдарда GPT-4 шамамен 1,76 триллион параметрге ие болуы мүмкін деген пікір айтылады, бұл бағалау оның жұмыс жылдамдығына және Джордж Хотцтың есептеулеріне негізделген. АҚШ өкілдер палатасының мүшелері Дон Бейер және Тед Лью New York Times басылымына берген мәлімдемесінде Альтман 2023 жылғы қаңтарда Конгреске барып, GPT-4 моделін және оның қауіпсіздік тетіктері алдыңғы ИИ үлгілеріне қарағанда жетілдірілгенін көрсеткенін растады.

OpenAI GPT-4 жайлы жариялаған блог жазбасында «GPT-4 алдыңғы нұсқа — GPT-3.5-пен салыстырғанда анағұрлым сенімді, креативті және күрделі нұсқауларды орындай алады» деп мәлімдеді. Модель 25 000 сөзге дейінгі мәтінді оқи, талдай және генерациялай алады, бұл алдыңғы нұсқалармен салыстырғанда едәуір ілгерілеу болып саналады. The New York Times басылымы GPT-4 дәлдік деңгейін айтарлықтай жақсартқанын, суреттерді сипаттап және түсіндіре алатынын, күрделі мәтіндерді қысқаша мазмұндау қабілетіне ие болғанын, адвокаттық емтихан мен бірнеше стандартталған тесттерден өткенін жазды, алайда жауаптарда галлюцинацияға бейімділік әлі де сақталғанын атап өтті.

2023 жылғы 22 наурызда Илон Маск жасанды интеллект саласындағы мыңнан астам маманмен бірге GPT-4-тен қуатты жүйелерді әзірлеуге уақытша тыйым салуды талап еткен ашық хат жариялады. Хат авторларының пікірінше, бұл саладағы бақыланбайтын даму адамзатқа қауіп төндіруі мүмкін деп есептеледі.

2024 жылғы 13 мамырда OpenAI модельдің жаңа нұсқасы — GPT-4o-ны таныстырды. «O» әрпі «omni» («жан-жақты») дегенді білдіреді. Қабілеттері жағынан GPT-4 Turbo-ға сәйкес келеді, бірақ кескіндер мен аудио деректерін өңдеу сапасы жоғарырақ.

 Дереккөздер 

Санат:Үлкен тілдік модельдер
Санат:2023 жылы жасалған бағдарламалық жасақтама
Санат:2023 жылы АҚШ-та пайда болғандар
Санат:OpenAI
Санат:Виртуалды әңгімелесушілер