технология

Невронните мрежи са научили да превръщат пикселните изображения в фотореалистични

Наскоро ни показаха "римейк" на класикаПрез 1997 г. стрелецът с II земетресение, където основната работа по подобряването беше сведена до интегрирането на технологията за проследяване на лъчи, но този път се появи нещо по-интересно в мрежата. И накрая, HD римейкът, който всички чакахме! Един от потребителите на Reddit, използвайки набор от няколко невронни мрежи, успява да превърне пикселирания образ на лицето на космическия пехотинец от класическия стрелец от 1993 г. Doom в почти фотореалистичен образ.

Както се съобщава от портала за футуризъм, в резултат на това, след всички манипулации, лицето на прочутия “Doom guy” започва да прилича на мускулеста версия на актьора Nathan Fillion.

Крайният резултат красиво показва товаче съвременните алгоритми за изкуствен интелект могат да се адаптират към пресъздаване на изображения, основани на много лошо качество на изходния материал.

Създаване на фотореалистичен образ

Както е обяснено от източника, крайният резултате продукт на работата на няколко генеративни противникови мрежи (GAN). Това са алгоритми за машинно обучение, изградени върху комбинация от две невронни мрежи, една от които генерира проби, а другата се опитва да разграничи правилните („автентични“) образци от грешните. Има много перспективи в тази технология, за които пишем в една от предишните ни статии.

Ентусиастът, който първо е създал тези изображенияпропусна лицето на Doom Guy чрез няколко програми за редактиране на снимки (FaceApp, Waifu2x и GIMP). Резултатът, въпреки че се оказа значително по-добър от оригиналния образ, все още беше твърде пикселизиран.

Преходен резултат. Образът на лицето се е променил значително, но все още остава нереален

Бяха извършени допълнителни работи с използване наNVIDIA StyleGAN генеративно-конкурентна мрежа. Той е способен да генерира лица (не само лица, но и неодушевени предмети), които никога не са съществували и в момента е един от най-мощните модели на невралната мрежа с генеративни спорове, което показва впечатляващи видими резултати. За да консолидира резултатите, той отново пропусна резултатното лице през StyleGAN. Тъй като оригиналното изображение на лицето имаше нереалистични пропорции, крайните щрихи и "изглаждането на ъглите" трябваше да се извършват ръчно.

След обработка от GAN технологията, но преди ръчно редактиране

Краен резултат

Сравнение на оригинални изображения на спрайт и обработка

Можете да обсъдите новините в нашия чат.