Kuvageneraattori

Kuvageneraattorit ovat koneoppimismalleja, jotka luovat kuvia tekstipohjaisiin kuvauksiin perustuen. Tällaisia malleja alettiin kehittää 2010-luvun puolivälissä syvien neuroverkkojen edistysaskelten ansiosta, ja vuoteen 2022 mennessä huippuluokan malleilla, kuten OpenAI:n DALL-E 2:lla, Google Brainin Imagenilla ja StabilityAI:n Stable Diffusionilla, pystyttiin tuottamaan lähes valokuvanlaatuisia kuvia.

Kuvageneraattorimallit koostuvat yleensä kielimallista, joka muuttaa syötetekstin latentiksi esitykseksi, ja generatiivisesta kuvamallista, joka luo kuvan tähän esitykseen perustuen. Ne koulutetaan valtavilla määrillä kuvia ja tekstiä, jotka yleensä kerätään internetistä.

 Historia 
Ensimmäinen moderni kuvageneraattorimalli, alignDRAW, esiteltiin vuonna 2015. Myöhemmät mallit, kuten VQGAN+CLIP, XMC-GAN, GauGAN2, DALL-E ja DALL-E 2, paransivat kuvan laatua ja realistisuutta. Teksti-videoksi-alustat, kuten Runway ja Make-A-Video, kehittyivät teksti-kuvaksi -mallien jatkokehityksenä.

 Teknologia 
Kuvageneraattorimallit käyttävät erilaisia arkkitehtuureja, ja transformer-mallit ovat yleistyneet tekstin koodaamiseen, kun taas ehdolliset generatiiviset adversariaaliset verkot tai diffuusiomallit ovat suosittuja kuvien generointiin. Mallit koulutetaan suurilla kuvatekstiparien aineistoilla, kuten LAION-5B, COCO, Oxford-120 Flowers ja CUB-200 Birds. Kuvageneraattorien mallien arviointiin sisältyy niiden kuvan laadun, monimuotoisuuden ja semanttisen yhteneväisyyden syötetekstin kanssa arviointi. Arvioinnissa käytetään metriikoita, kuten Inception-pisteitä (IS) ja Fréchet Inception -etäisyyttä.

 Käyttötarkoitukset 
Kuvageneraattorimalleilla on erilaisia käyttökohteita, kuten taide, muotoilu, prototyyppien luominen ja taiteellisen tuotannon saavutettavuuden lisääminen. Ne muodostavat myös osan laajemmasta keinotekoisen median suuntauksesta, jonka odotetaan vaikuttavan liiketoimintaan tulevina vuosina.

 Käyttö 
Useimmat kuvageneraattorit toimivat pilvipalvelussa. Kuvien sisältöä määrittävä teksti syötetään palveluun selaimella tai Midjourneyn tapauksessa Discord-sovelluksella. Sitten pilvipalvelu generoi kuvan ja näyttää sen hetken kuluttua selaimessa.

 Luettelo kuvageneraattoreista 

 Midjourney Inc.:n Midjourney
 CompVis-tutkimusryhmän Stable Diffusion
 OpenAI:n DALL-E
 Microsoftin Image Creator from Designer perustuu DALL-E:n versioon 3.
 Freepik-kuvapankin sisältämä kuvageneraattori perustuu DALL-E:n tuntemattomaan versioon.
 Boris Dayman Craiyon
 Ideogram AI:n Ideogram

 Videogeneraattorit 
Google on kehittänyt tekstistä videoksi -tekoälygeneraattoreita nimillä Lumiere ja Veo. Samansuuntaisesta kehitystyöstä ovat kertoneet myös Meta, Runway-yhtiö, OpenAI (Sora-videogeneraattori) ja ByteDance (Seedance).

 Katso myös 

 Kuvankäsittely
 Tekoäly
 Tietokonetaide

 Lähteet 

*