Geniş dil modeli

Geniş dil modeli - GDM (Large Language Model - LLM), genel amaçlı olarak dili anlama ve üretme becerisiyle öne çıkan bir dil modeli türüdür. GDM'ler bu yetenekleri, eğitilmeleri sırasında milyarlarca parametreyi öğrenebilmek amacıyla niceliksel olarak çok fazla veri kullanarak kazanırlar. Bu sırada da, aşırı büyük boyutta hesaplama kaynakları tüketirler.  GDM'ler, gelişmiş olarak yapay sinir ağlarıdır (temel olarak dönüştürücüler ) ve özgözetimli öğrenme ya da yarı gözetimli öğrenme yöntemleri kullanılarak (önceden) eğitilirler.

GDM'ler özbağlanımlı dil modelleri olarak, bir giriş metnini alıp bir sonraki belirteci ya da sözcüğü kezlerce tahmin ederek çalışırlar.  2020 yılına dek, bir modelin belirli görevleri yerine getirebilecek şekilde uyarlanmasının tek yolu ince ayar yapmaktı. Ancak günümümzde popüler olan GPT-3 gibi daha büyük boyutlu modeller, benzer sonuçlara ulaşmak için sufle mühendisliğini kullanabilecek biçimde tasarlanmaya başladı .  GDM'lerin, insan dili derleminde var olan sözdizimi, anlambilim ve "ontoloji" hakkında somutlaşmış bilgi edinebilmenin yanı sıra, aynı zamanda bütüncede bulunan yanlışlıkları ve önyargıları da edindikleri düşünülmektedir. 
Doğal dil işleme