Прочитав об улучшайзинге фотографий посредством нейросетей (а конкретно - при помощи приложения Remini), решил посмотреть, что это за зверь такой и с чем его едят. Благо – в семейном архиве имеются фотографии, обработка которых вручную, скажем так, довольно затруднительна. Итак, погнали.

Первое фото. На нём запечатлён мой дед (он слева) с сослуживцем (март 1942 года, г. Раменское, 201-я ВДБ). Оно уже, в общем-то, по большей части отреставрировано (убраны заломы и большинство артефактов на значимых местах фотографии). Мне просто захотелось добавить резкости и уменьшить зернистость. Смотрим:

В целом неплохо. Однако при увеличении картинка становится не столь однозначной. Всё-таки – иногда всё же лучше картинка с «зерном».

Второе фото. Дед с бабушкой и их дети (среди них мой отец и, соответственно, мои дядя и тётя). Примерно 1958-59 год. За обработку этой фотографии даже не брался ввиду ее сильной размытости. Результат намного интереснее. Обратите внимание – картинка стала практически цветной (колоризация слабенькая, но вполне ощутимая; особенно заметна на увеличенных фрагментах). Похоже, нейросеть не поняла, что перед нею Ч/Б изображение )).

Дед, кстати, тут ощутимо помолодел. Выглядит чуть ли не моложе, чем на фронтовых фотографиях.

Дети выглядят как-то… странно. Хотя в чём именно странность, сформулировать вряд ли получится.

Третье фото. Опять-таки – бабушка и дедушка с внучкой (моей старшей сестрой). Год примерно 1972-73. Тут проблема другого плана – фотография (сама по себе довольно нечеткая) напечатана на текстурированной фотобумаге. Кстати – печать на такой бумаге является неплохим способом «замаскировать» не слишком высокое качество изображения. В результате на скане появился характерный рисунок. Было интересно – справится ли нейросеть с такой «шагренью»? Не справилась. Точнее – справилась частично и только на светлых участках изображения (опять-таки частично). Зато лица обработаны достаточно корректно.

А теперь минутка крипоты. Обратите внимание на фрагмент узора юбки внучки (для ЛЛ обведен кружком):

Вот как-то так )).

ЗЫ: Баянометр предлагает что-то странное - от рыбной ловли в Екатеринбурге до службы в израильской армии :).

Мне кажется нас ждет волна старых мемов в HD =)

Запустил программу я, тег моё.

Помимо основной своей работы, немного занимаюсь реставрацией и восстановлением фотографий. С приходом в наше время нейросетей, я с любопытством за ними наблюдаю. Помните, сначала эти фотографией с мордами животных, будто лсд трип? Потом наложение фильтров на фото в тему различных художественных стилей, далее изменение сезона года с камер видеорегистраторов , где из зимы делали лето и наоборот. Потом всем известный deepfake с заменой лиц, который с каждым годом всё лучше и лучше (гляньте только эпизод из "Назад в будущее" с Томом Холладном и Робертом Дауни Мл.!). Вспоминается ещё небольшая рисовалка от Nvidia, где можно было мазками как в паинте нарисовать красивый пейзаж. И вот теперь то, что я честно ждал - восстановление расфокусированных, старых, низкокачественных или низкого разрешения фотографий.

Для начала я попробовал на старом отсканированном фото своего деда, где много шума, видно текстуру бумаги и т.д.

Если долго смотреть на фотографию, видно что получается будто нарисованная карандашом  картина, но профессиональным художником. Да, белые точки, царапины и др. дорисовываются также, потому что нейросеть не понимает нужные ли это объекты для фото или нет. Но радует как преобразуются волосы, щетина и другие детали. И главное убирается этот проклятый шум!

Далее фото ещё одного дедушки, погибшего в ВОВ. Не идеально. Но лицо стало лицом.

Третей фотографией я залил фото своей тёти, трагически погибшей в 14 лет, у который поэтому было очень мало фотографий. На эмоциях скидываю фотографии своему отцу, который "тыжпрограммист" со стажем. Сказал: Очень круто! Особенно сестра. Если судить памяти, по похожести дорисовалось примерно на 80-90%. Единственное с глазами беда, но можно дофотошопить.

Скидываю ему ссылку на приложение, отец открывает свой архив сканов, и первым делом заливает свою расфокусированную фотку с мыльницы из 90х. Идентичность 100%. Даже прыщ на бороде.

Ну и напоследок. Недавно как раз восстанавливал фотографию одной бабушки. Само фото было очень маленькое, а лицо на нём вообще составляло меньше сантиметра.

1. Фото отсканировано в 2400dpi.

2. Моё восстановление + быстрая коллоризация

3. Восстановление оригинала скана приложением

4. Восстановление моей обработанной фотографии + немного фотошопа

По итогу хочу сказать, что это очень круто. Жаль работает только на лица.

Ещё видел не мало отзывов, что "рисует" абсолютно других людей. Но в моём случае (да если ещё совмещать с фотошопом) получается практически идеально. Приложение называется Remini есть на iOs и Android. И да, может быть кто-то знает аналоги для ПК?