Научились увеличивать разрешение изображений

🧐 Что случилось: представили два связанных подхода к увеличению качества изображений — сверхразрешение посредством повторных уточнений (SR3) и каскадные диффузионные модели (DCM).

🤔 Как работает: SR3 берёт изображение с низким разрешением за основу и строит его в высоком разрешении из чистого шума. Масштабирование выходит до разрешений в 4—8 раз больше исходного.

Каскадный подход DCM похож на конвейер, на котором изображение проходит через несколько моделей диффузии. Первая генерирует данные с низким разрешением, остальные постепенно увеличивают разрешение изображения до самого высокого.

Таким образом можно увеличивать картинки с 64 × 64 до 1024 × 1024 пикселей.

👨‍💻 Кто: Google Research, США.

Источник: ai.googleblog.com