Апскейлинг изображений с помощью ИИ: что он действительно может и не может исправить в фотографии низкого разрешения

Маленькая, размытая фотография — старый скан, скриншот, миниатюра, которая является единственной оставшейся копией чего-либо, — растягивается до большего размера, и результат остаётся точно таким же размытым, только больше. Простое изменение размера не может добавить деталь, которая изначально не была захвачена; другая категория инструментов пытается добавить её всё равно.

Растягивание против выдумывания деталей

Базовое изменение размера (ближайший сосед, билинейное, бикубическое — стандартные методы интерполяции) делает обоснованную оценку цвета каждого нового пикселя на основе соседних, что даёт плавно размытое большее изображение, но никогда ничего резче исходника. Апскейлинг с ИИ использует принципиально другой подход: модель, обученная на огромном количестве пар изображений высокого разрешения и намеренно ухудшенных версий низкого разрешения, узнаёт, как обычно выглядит правдоподобная мелкая деталь, и генерирует новые пиксели, которые являются настоящей наилучшей оценкой детали, а не средним значением существующих пикселей.

Где результаты действительно выдерживают

Лица, текст и регулярные текстуры (кирпич, ткань, листва) — это случаи, с которыми апскейлинг с ИИ справляется лучше всего, поскольку это именно те паттерны, наибольшее количество примеров которых видела модель, обученная на миллионах фотографий, и которые она может уверенно реконструировать.

Где выдумка начинает быть заметной

• Действительно уникальная, нерегулярная деталь — конкретный паттерн, не похожий ни на что распространённое, — иногда «исправляется» в сторону чего-то более общего по виду, потому что модель работает исходя из уже виденных паттернов.
• Текст на незнакомом шрифте или языке, на котором модель не была особо обучена, может выйти как правдоподобные, но неправильные символы вместо настоящих.
• Сильно сжатые или очень низкого разрешения источники дают модели меньше реального сигнала для работы, поэтому большая часть результата — это выдумка модели, а не восстановление утраченной детали.

Для всего, где точность важнее приятного результата — документ, который нужно действительно прочитать, доказательство, исторический документ — относитесь к увеличенному изображению как к вспомогательному средству для просмотра, а не как к замене исходного источника.