technológia

A neurális hálózatok tanították, hogy a pixelképeket fotorealisztikusvá alakítsák

Nemrégiben egy klasszikus "remake" -et kaptunk1997-ben a II. Lövöldözős lövöldözős játék, ahol a fejlesztés fő munkája a sugárkövetési technológia integrációjával csökkent, de ezúttal valami érdekesebb jelent meg a weben. Végül, a HD remake, amit mindannyian vártunk! A Reddit egyik felhasználója, aki több idegi hálózatot használ, az 1993-as klasszikus lövőből, Doomból, képes volt a térbeli gyalogos arcának pixelált képét szinte fotorealisztikus képké alakítani.

A Futurizmus portál szerint ennek eredményeképpen a manipulációk után a híres „Doom srác” arca Nathan Fillion színészének egy izmos változata lett.

A végeredmény szépen bizonyítja ezthogy a modern mesterséges intelligencia algoritmusok képesek legyenek alkalmazkodni a nagyon rossz minőségű forrásanyagon alapuló képek újjáépítéséhez.

Fotorealisztikus kép létrehozása

Amint azt a forrás magyarázza, a végeredménytöbb generatív ellentétes hálózat (GAN) munkájának eredménye. Ezek két olyan neuronhálózat kombinációjára épülő gépi tanulási algoritmusok, amelyek közül az egyik mintákat generál, a másik megpróbálja megkülönböztetni a helyes („hiteles”) mintákat a rosszból. Ennek a technológiának sok perspektívája van, amelyeket az előző cikkek egyikében írtunk.

Az a lelkes, aki először készítette ezeket a képekettöbb fotószerkesztő programban (FaceApp, Waifu2x és GIMP) hiányzott a Doom Guy sprite arcán. Az eredmény, bár az eredeti képhez képest lényegesen jobbnak bizonyult, még mindig túl pixelált volt.

Átmeneti eredmény. Az arc képe jelentősen megváltozott, de továbbra is irreális

További munkát végeztünkAz NVIDIA StyleGAN generatív-versenyképes hálózata. Képes olyan arcokat generálni (nemcsak arcokat, hanem élettelen tárgyakat), amelyek még soha nem léteztek, és jelenleg a generatív-ellenséges neurális hálózat egyik legerősebb modellje, amely lenyűgöző látható eredményeket mutat. Az eredmények konszolidálásához a StyleGAN-on keresztül ismét hiányzott az eredmény. Mivel az arc eredeti képe irreális volt, a végső érintést és a „sarkok simítását” manuálisan kellett elvégezni.

A GAN technológiával történő feldolgozás után, de manuális szerkesztés előtt

Végeredmény

Az eredeti sprite képek összehasonlítása és feldolgozása

A híreket megvitathatja a Telegram-chat-en.