Збільшення зображення за допомогою ШІ: що воно справді може й не може виправити у фотографії низької роздільної здатності

Маленька, розмита фотографія — старе сканування, скріншот, мініатюра, що є єдиною копією, яка залишилася від чогось, — розтягується до більшого розміру, і результат так само розмитий, лише більший. Просте зміна розміру не може додати деталь, яка ніколи не була захоплена; інша категорія інструментів все одно намагається додати її.

Розтягування проти вигадування деталей

Базова зміна розміру (найближчий сусід, білінійна, бікубічна — стандартні методи інтерполяції) робить обґрунтовану оцінку кольору кожного нового пікселя на основі сусідніх, що дає плавно розмите більше зображення, але ніколи нічого різкішого за джерело. Збільшення за допомогою ШІ використовує принципово інший підхід: модель, навчена на величезній кількості пар зображень високої роздільної здатності та навмисно погіршених версій низької роздільної здатності, вчиться, як зазвичай виглядає правдоподібна дрібна деталь, і генерує нові пікселі, які є справжнім найкращим здогадом щодо деталі, а не середнім значенням наявних пікселів.

Де результати справді витримують

Обличчя, текст і регулярні текстури (цегла, тканина, листя) — це випадки, з якими збільшення за допомогою ШІ справляється найкраще, оскільки це саме ті патерни, найбільше прикладів яких бачила модель, навчена на мільйонах фотографій, і які вона може впевнено реконструювати.

Де вигадка починає бути помітною

• Справді унікальна, нерегулярна деталь — конкретний патерн, що не схожий ні на що поширене — інколи «виправляється» на щось більш загального вигляду, оскільки модель працює на основі патернів, які вже бачила раніше.
• Текст незнайомим шрифтом чи мовою, на якій модель не була сильно навчена, може вийти як правдоподібні, але неправильні символи замість справжніх.
• Сильно стиснуті чи дуже низької роздільної здатності джерела дають моделі менше реального сигналу для роботи, тому більша частина результату — це вигадка моделі, а не відновлення втраченої деталі.

Для всього, де точність важливіша за приємний результат — документ, який вам справді потрібно прочитати, доказ, історичний запис — ставтеся до збільшеного зображення як до допомоги для перегляду, а не заміни оригінального джерела.