Нейросеть для фото: что она реально умеет и как этим пользоваться

Под «нейросетью для фото» люди подразумевают три разные вещи: обработку своего снимка, создание картинки с нуля и превращение фотографии в стилизованный портрет. Инструменты для них тоже разные. Разберём по задачам.

Что получается хорошо

Убрать лишнее. Провода, прохожего, мусор в углу кадра, отражение фотографа в витрине. Модель дорисовывает фон на месте удалённого объекта, и на однородных поверхностях результат обычно неотличим от настоящего.

Заменить фон. Вырезать человека или предмет и поставить другой фон. Задача, где нейросети обошли ручное выделение по всем статьям: волосы, мех и полупрозрачные края раньше отнимали часы.

Увеличить разрешение. Старое фото с телефона десятилетней давности можно поднять до размера, при котором его печатают. Модель не «восстанавливает» детали, она их правдоподобно дорисовывает, и для семейного архива этого достаточно.

Убрать шум и смазанность. Ночные снимки, кадры из-под дождя, тёмные помещения. Работает хорошо ровно до момента, когда деталей в исходнике не осталось вовсе.

Расширить кадр. Дорисовать то, что не поместилось: небо сверху, пол снизу. Спасает, когда снимок нужно вписать в другой формат.

Что получается плохо

Лица знакомых людей. Любая обработка чуть меняет черты, и близкие это замечают сразу. Чем сильнее вмешательство, тем заметнее.

Руки и пальцы. Классическая беда генеративных моделей. При дорисовке кадра рука на краю превращается в нечто с шестью пальцами.

Текст на фотографии. Вывески, этикетки, надписи на одежде. Кириллица получается особенно плохо: буквы похожи на буквы, но слов не складывают.

Достоверность. Модель дорисовывает то, чего в кадре не было. Для семейного альбома это неважно, для документов, отчётов и новостей — недопустимо.

Как ставить задачу, чтобы получилось

Один снимок, одна правка. Просить сразу убрать лишнее, поменять фон и осветлить лицо — верный способ получить кашу. Делайте по шагам и сохраняйте промежуточные версии.

Показывайте, а не описывайте. Если инструмент позволяет выделить область кистью, выделяйте. Текстовое описание «убери человека справа» работает хуже, чем прямое указание пальцем.

Начинайте с максимального качества. Обработка ужимает и пережимает. Пропустив через модель уже сжатый снимок из мессенджера, вы получите артефакты поверх артефактов.

Проверяйте края. Самое частое место брака — граница между исходником и дорисовкой: ореолы, размытые контуры, несовпадение зернистости.

Что доступно из России

Ситуация меняется, поэтому смотрите не на список названий, а на три признака.

Работает ли сервис без обходных путей. Часть зарубежных инструментов требует зарубежной карты и стабильного доступа, и это отдельная морока.

Есть ли российские аналоги. По базовым задачам — удалить объект, поднять разрешение, вырезать фон — они закрывают почти всё и принимают обычную карту.

Что происходит с вашими снимками. У бесплатных сервисов загруженные фотографии часто используются для обучения. Для отпускных кадров всё равно, для рабочих съёмок и документов — нет.

Отдельно про генерацию с нуля

Это другая задача и другие инструменты. Модель рисует картинку по описанию, и тут действуют иные правила: чем конкретнее описание, тем предсказуемее результат, а стиль задаётся отдельно от содержания.

Для иллюстраций к статьям, обложек и фонов это уже рабочий инструмент. Для того, что должно выглядеть как настоящая фотография конкретного места или человека, — пока нет.

С чего начать

Возьмите десяток своих снимков и прогоните через один инструмент четыре задачи: убрать лишнее, заменить фон, поднять разрешение, расширить кадр. За полчаса вы поймёте про его возможности больше, чем из любого обзора, и заодно увидите, где именно он врёт.