Neuraaliset verkot ovat opettaneet muuttamaan pikselikuvat fotorealistisiksi

Viime aikoina näytettiin klassisen "remake"1997 järistys II-ampuja, jossa parannuksen päätyö vähentyi ray tracing -teknologian integroimiseksi, mutta tällä kertaa verkossa oli jotain mielenkiintoisempaa. Lopuksi HD-remake, jota me kaikki odotimme! Yksi Redditin käyttäjistä, joka käytti useita hermoverkkoja, kykeni kääntämään avaruuden jalkaväen kasvon pikseloidun kuvan vuoden 1993 klassisesta ampumasta Doomista lähes fotorealistiseksi kuvaksi.

Futurismiportaalin mukaan sen seurauksena kuuluisan "Doom-kaverin" kasvot alkoivat kaikkien manipulaatioiden jälkeen näyttelijän Nathan Fillionin lihaksikkaana versiona.

Lopputulos osoittaa sen hyvinettä nykyaikaiset keinotekoiset älykkyysalgoritmit pystytään mukautumaan erittäin huonolaatuiseen lähdemateriaaliin perustuvien kuvien uudelleenmuodostukseen.

Fotorealistisen kuvan luominen

Kuten lähde selittää, lopputuloson useiden generatiivisten vastakkaisten verkkojen (GAN) työn tulos. Nämä ovat koneiden oppimisalgoritmeja, jotka on rakennettu kahden hermoverkon yhdistelmään, joista toinen tuottaa näytteitä, ja toinen yrittää erottaa oikeat ("aito") näytteet vääristä. Tässä tekniikassa on paljon näkökulmia, joita kirjoitimme edellisistä artikkeleistamme.

Harrastaja, joka loi nämä kuvat ensinohitti Doom Guyn sprite-kasvot useiden kuvankäsittelyohjelmien kautta (FaceApp, Waifu2x ja GIMP). Tulos, vaikka se osoittautui huomattavasti paremmaksi kuin alkuperäinen kuva, oli vielä liian pikseliä.

Siirtymätulos. Kasvojen kuva on muuttunut huomattavasti, mutta se on edelleen epätodellinen

Lisätyötä tehtiin käyttämälläNVIDIAn StyleGAN Generative-Competitive Network. Se kykenee tuottamaan kasvoja (ei vain kasvoja, vaan myös elottomia esineitä), joita ei ole koskaan ollut olemassa, ja tällä hetkellä se on yksi tehokkaimmista generatiivisen väitteiden hermoverkon malleista, joka näyttää vaikuttavia näkyviä tuloksia. Tulosten vakiinnuttamiseksi hän jätti syntyneen kasvon StyleGANin kautta uudelleen. Koska kasvojen alkuperäinen kuva oli epärealistisia, lopulliset kosketukset ja "kulmien tasoittaminen" oli tehtävä käsin.