Akronymet GPT i ChatGPT står for «enerative re-trained ransformer». «Generative» refererer til systemets evne til å generere tekst, det vil si å produsere nye setninger og svar basert på den informasjonen den har blitt trent med. «Pre-trained» betyr at systemet er «forhåndstrent» på store mengder tekstdata før den brukes i spesifikke oppgaver. Det lærer mønstre, språkstrukturer og informasjon fra datamengden. Det gjør at systemet kan generere sannsynlige svar på en rekke spørsmål. «Transformer» er navnet på arkitekturen systemet er bygget på. Transformer-arkitekturen er spesielt effektiv for språkbehandling og brukes til å bygge noen av de mest avanserte språkmodelleringene, inkludert GPT.