Увеличение фотографии с помощью нейросетей

Где это может вообще пригодиться?

Кажется, что в мире высоких разрешений и новых матриц фотоаппаратов вопрос размера вроде бы не стоит. Это так, но при условии, что мы будет публиковать свои шедевры исключительно в соц.сетях. В мире же физической печати и/или подготовке к ней фотографий вопросы увеличения изображений все еще стоят довольно остро. Сюда же можно добавить высококлассную и высокоточную обработку.

В итоге как минимум в трех моментах мы обязательно вспомним про апскейл:

1. Подготовка к печати форматов больше, чем дает разрешение вашей камеры
2. Ретушь с потерей деталей (с помощью генеративного увеличения мы можем генерировать детали, уменьшить результат до оригинального размера и вставить в ретушируемую фотографию)
3. Ну и потеря исходника, когда большой формат нужен :)

Результат:

Тут мы видим действительно огромное количество дорисованной текстуры. Причем дорисованной логично: очень хорошо проработан камень, трава, но вот с человеком уже не так однозначно. Возможно это связано с тем, что модель для увеличения была выбрана «Landscape».

Но главный философский вопрос в другом — это всё еще та же самая фотография? Оставлю вам возможность для дискуссий :)

Результат:

Тут мы видим попытку увеличить фотографию «без креативности» максимум оригинальных деталей, не такая звенящая резкость как у magnific.ai, но и без самоуправства с дорисовкой. Лучше всего Clipdrop себя показывает при больших кратностях.

Результат:

Тут мы тоже видим сгенерированные текстуры, которые соответствуют логике. При этом Stable Diffusion — это такой линукс в мире нейросетей. И результат очень сильно зависит от правильно подобранной модели для генерации. Минусом будет пожалуй большие компьютерные (и как следствие — временные) затраты и невозможность посмотреть «на лету» будущий результат выставленных параметров.

Результат:

Очень быстро и без генерации текстур. Это может быть и плюсом (фотография остается максимально сама собой) и минусом (при больших кратностях увеличения начинается странная дорисовка особенно на контрастных или текстурных объектах). Зато в Topaz можно пакетно загонять фотографии и всех их увеличивать за один присест с одинаковыми выбранными настройками.

Результат:

Пожалуй этот результат можно сравнить с Magnific.Ai за исключением того, что он локальный и бесплатный. Да и фотография больше похожа на саму себя без креативных дополнений.

А с учетом того, что тут все можно настроить более точно да еще и подобрать разные модели под разные задачи, то вариант выглядит более чем интересно! За одним минусом — требования к железу (компьютеру).