Výskumné tímy často experimentujú s videoobsahom pomocou neurónových sietí. Zoberme si napríklad NVIDIA, ktorá na konci roku 2017 vyškolila neurónovú sieť na zmenu počasia a denného času vo videu. Ďalší projekt tohto druhu začali výskumníci z univerzity Carnegie Melon University, ktorí vytvorili neurónovú sieť na ukladanie výrazov tváre jednej osoby na tvári druhej.
Projekt je založený na technológii DeepFakes pre zmenu tváre vo videu. Je založená na generatívnej kontradiktórnej forme strojového učenia. V rámci svojho rámca sa generatívny model pokúša oklamať diskriminačný a naopak, čím systém chápe, ako sa dá obsah transformovať do iného štýlu.
Algoritmus cyklu-GAN na prenos vlastností do iného objektu nie je ideálny a umožňuje na obrázku artefakty. Na zlepšenie kvality neurónovej siete vedci použili vylepšenú verziu Recycle-GAN. Zohľadňuje nielen polohu rôznych častí tváre, ale aj rýchlosť ich pohybu.
Neurónová sieť úspešne preniesla výrazy tváre televízneho moderátora Stephena Colberta na komik Johna Olivera. Okrem toho preniesla kvitnúci narcis na ibištek.
Vedci sa domnievajú, že táto technológia by sa mohla použiť v kinematografii. Tým sa proces urýchli a znížia sa náklady na výrobu filmov. Schopnosť neurónových sietí meniť počasie na videu uľahčí učenie elektrických vozidiel jazdiť za rôznych poveternostných podmienok.
Ramis Ganiev
Propagačné video: