NVIDIA без зайвого галасу представила новий метод, який дозволяє генерувати якісніші зображення та покращувати вже готові фото

Зазвичай генератори зображень працюють так: спочатку створюється спрощене представлення майбутньої картинки (латентний простір), а потім VAE-декодер відновлює з нього фінальне зображення відповідно до вашого запиту.

У NVIDIA пропонують інший підхід: замість звичайного VAE використовувати додаткову ШІ-модель PiD. Вона не лише декодує зображення, а й одночасно виконує роль реставратора, намагаючись зберегти максимум деталей і підвищити якість результату.

Технологію також можна використовувати для апскейлу фотографій — достатньо скористатися режимом img2img.

@wallstreetukr