Нейросеть научили превращать пиксельные картинки в портреты. С иконками из 8-битных игр тоже работает
В Сети стал доступен бесплатный инструмент на базе нейросети Face Depixelizer, который превращает даже небольшие и сильно пикселированные изображения в реалистичные портреты. Его создал и выложил в Сеть российский разработчик Денис Малиманов.
Face Depixelizer
Given a low-resolution input image, model generates high-resolution images that are perceptually realistic and downscale correctly.
😺GitHub: https://t.co/0WBxkyWkiK
📙Colab: https://t.co/q9SIm4ha5pP.S. Colab is based on thehttps://t.co/fvEvXKvWk2 pic.twitter.com/lplP75yLha
— Bomze (@tg_bomze) June 19, 2020
Система работает по следующему принципу. Нейросеть получает изображение и увеличивает его в размере. Далее оно перебирает лица из базы StyleGAN (в ней собраны реалистичные фото людей, которые никогда не существовали) до тех пор, пока не найдёт то, которое при уменьшении до исходного размера будет выглядеть как изначальная картинка. Наглядно это демонстрирует гифка в посте выше.
При этом использовать фотографии людей совсем не обязательно. Вот как выглядит Би-Джей Бласковиц — герой Wolfenstein.
With default settings, I got this result. pic.twitter.com/mRkqqTwhJF
— Bomze (@tg_bomze) June 20, 2020
А так — Думгай из первого Doom.
So that one is Wolfenstein, here is Doom pic.twitter.com/ixpItQyJ5q
— Hani ✊🏽🧢 (@h_bash) June 20, 2020
Ну и куда же без Minecraft.
what a nice tool 👏 hello minecraft dude pic.twitter.com/hLRK1UljNf
— Moritz Klack (@moklick) June 20, 2020
Хотя фото выше выглядят неплохо, получилось немало абсолютно проклятых изображений.
hem hem. pic.twitter.com/Mx4MMhCy5c
— Elyën (@dehors_dedans) June 20, 2020
Woah. pic.twitter.com/vOR5ruxEnJ
— Baptiste le confiné (@BaptisteJRobert) June 20, 2020
— Jérémy Fa (@jeremyfaivre) June 20, 2020
Марио вообще не везёт с этой нейросетью.
Well pic.twitter.com/LXjqvUl17t
— Antoine Dalmières (@adalmieres) June 20, 2020
Super Mario 😁 pic.twitter.com/DRTduzd4kX
— Chicken3gg (@Chicken3gg) June 20, 2020
А некоторые из них просто странные и неправильные.
Karen, revealed. pic.twitter.com/HtM1YD3afO
— Shawn Wheatley (@swheatley) June 20, 2020
oh my god i can’t stop pic.twitter.com/SzwJwwI3XY
— Isaiah (@papaabar) June 20, 2020
В дело пошли эмодзи.
— Mohimont Lucas (@MohimontL) June 20, 2020
I love that your Tweet turned into a giant collaboration thread with everyone posting their own hilarious upscales. My favorite so far is this 😅 guy.
(If you want to get similarly creative interpretations keep the steps low.) pic.twitter.com/sX7uyrFybY
— Jonathan Fly 👾 (@jonathanfly) June 20, 2020
Танос уже не тот.
— Mohimont Lucas (@MohimontL) June 20, 2020
Бонусом — Линк с недосыпом.
Link, having a hard life and a lack of sleeping time pic.twitter.com/SculrPKuFK
— Antoine Dalmières (@adalmieres) June 20, 2020
В комментариях пользователь уточнил, не будет ли такой инструмент использоваться, чтобы распознать людей, чьи лица скрыты на фото и видео для их безопасности. Автор ответил, что цель нейросети — не восстановить исходник, а найти подходящее лицо среди людей, которых никогда не существовало — так что программа не сможет никого идентифицировать (хотя и может уловить некоторые черты лица).
This tool will not restore the original face, however, it can help with the identification of facial features.
— Bomze (@tg_bomze) June 20, 2020
На момент публикации сервис временно недоступен из-за превышения лимита загрузок в Google Drive, который используется для хранения изображений на время обработки.