Raziskovalne skupine pogosto eksperimentirajo z video vsebino z uporabo nevronskih mrež. Vzemimo za primer NVIDIA, ki je konec leta 2017 usposobila nevronsko mrežo za spreminjanje vremena in časa dneva na videu. Drugi tovrstni projekt so začeli raziskovalci z univerze Carnegie Melon, ki so ustvarili nevronsko mrežo za vsiljevanje obraznih izrazov ene osebe na drugem obrazu.
Projekt temelji na tehnologiji DeepFakes za spreminjanje obrazov na videu. Temelji na generativni konkurenčni obliki strojnega učenja. V okviru tega poskuša generativni model zavajati diskriminatorno in obratno, zaradi česar sistem razume, kako je mogoče vsebino spremeniti v drugačen slog.
Algoritem cikla-GAN za prenos lastnosti na drug objekt ni idealen in omogoča artefakte na sliki. Za izboljšanje kakovosti nevronske mreže so raziskovalci uporabili njeno izboljšano različico Recycle-GAN. Upošteva ne le položaj različnih delov obraza, temveč tudi hitrost njihovega gibanja.
Nevronska mreža je uspešno prenesla obrazno mizo TV voditelja Stephena Colberta na obraz komika Johna Oliverja. Poleg tega je postopek cvetenja narcis prenesla na hibiskus.
Raziskovalci verjamejo, da bi tehnologijo lahko uporabili v kinematografiji. To bo pospešilo postopek in zmanjšalo stroške za snemanje filmov. Sposobnost nevronskih omrežij, da na videu spremenijo vreme, bo olajšalo učenje električnih avtomobilov vožnje v različnih vremenskih pogojih.
Ramis Ganiev
Promocijski video: