Tutkimusryhmät kokeilevat usein videosisältöä hermoverkkojen avulla. Otetaan esimerkiksi NVIDIA, joka koulutti vuoden 2017 lopussa hermoverkon muuttamaan säätä ja vuorokaudenaikaa videossa. Toisen tällaisen hankkeen käynnistivät Carnegie Melon -yliopiston tutkijat, jotka loivat hermoverkon, jonka avulla yhden ihmisen ilmeet asetetaan toisen kasvoille.
Projekti perustuu DeepFakes-tekniikkaan kasvojen vaihtamiseen videossa. Se perustuu koneoppimisen generatiiviseen kilpailevaan muotoon. Generatiivinen malli pyrkii puitteissaan harhauttamaan syrjivää ja päinvastoin, minkä seurauksena järjestelmä ymmärtää, kuinka sisältö voidaan muuttaa eri tyyliin.
Syklin-GAN-algoritmi ominaisuuksien siirtämiseksi toiseen objektiin ei ole ihanteellinen, ja se sallii kuvan esineiden. Neuraaliverkon laadun parantamiseksi tutkijat käyttivät sen parannettua Recycle-GAN-version. Siinä otetaan huomioon paitsi kasvojen eri osien sijainti, myös niiden liikkumisen nopeus.
Neuraaliverkko siirsi onnistuneesti televisio-ohjaaja Stephen Colbertin ilme koomikko John Oliverille. Lisäksi hän siirsi narsissin kukinnan prosessin hibisiin.
Tutkijoiden mielestä tekniikkaa voitaisiin käyttää elokuvauksessa. Tämä nopeuttaa prosessia ja vähentää elokuvien valmistuskustannuksia. Neuraaliverkkojen kyky muuttaa sää videossa helpottaa sähköautojen opetusta ajamaan eri sääolosuhteissa.
Ramis Ganiev
Mainosvideo: