Игры со Switch 2 научились запускать с NVIDIA DLSS

И это выглядит очень круто

Игры со Switch 2 научились запускать с NVIDIA DLSS

Утекшая версия NVIDIA DLSS 5 добралась туда, где увидеть ее работу было особенно неожиданно. 

Энтузиасты смогли пропустить игры Nintendo Switch 2 через экспериментальный нейрорендеринг. Они показали, как Mario Kart World, Donkey Kong Bananza и другие эксклюзивы консоли могут выглядеть после обработки ИИ.

Результат впечатляет, хотя до настоящего фотореализма ему далеко. Нейросеть заметно меняет освещение, дорисовывает детали и делает некоторые поверхности гораздо более объемными. 

Но вместе с этим появляются характерные для экспериментальной технологии артефакты.

Читают прямо сейчас:

Промт-инженер: самый лёгкий вход в программирование с ИИ — разница между «мясным прокси» и настоящим промт-инженером: один копирует, другой формулирует, проверяет и адаптирует

Галлюцинации ИИ: почему LLM врут и как с этим бороться — почему проверять ответ нейросети перед отправкой — это не паранойя, а базовый профессиональный навык

Вайбкодинг и безопасность: 3 реальных кейса из продакшена — что происходит, когда сгенерированный код уходит в продакшен без понимания того, что там написано

Фотореалистичная Switch 2 работает не на самой консоли

Демонстрацию провел YouTube-блогер EDMIRE. В его тестах засветились Mario Kart World, Splatoon Raiders, The Legend of Zelda: Tears of the Kingdom, Donkey Kong Bananza, Luigi’s Mansion 3 и The Legend of Zelda: Skyward Sword.

При этом никакой специальной версии DLSS 5 для Switch 2 не существует. Консоль лишь отдает изображение, а вся тяжелая обработка выполняется на внешнем компьютере.

Схема получилась довольно необычной. HDMI-сигнал с Switch 2 проходит через карту захвата и поступает в OBS Studio. В модифицированную версию программы блогер добавил поддержку утекшей библиотеки nvngx_dlssnr.dll, превратив DLSS 5 в своеобразный фильтр для поступающего видеопотока.

После этого кадры отправляются на RTX 5070, которая уже занимается нейрорендерингом. То есть консоль продолжает генерировать обычную для себя картинку, а компьютер пытается превратить ее в более реалистичную прямо на лету.

https://www.youtube.com/watch?v=hKwh-GCqHdM

ИИ приходится угадывать, что находится на экране

Такой способ запуска серьезно отличается от того, как DLSS 5 должен работать при полноценной интеграции с игрой. У нейросети нет доступа к данным движка, которые могли бы подсказать ей точное положение объектов.

Вместо карт глубины, векторов движения и информации о материалах она получает практически готовый кадр. Поэтому системе приходится самостоятельно определять геометрию сцены по изображению.

На удачных участках эффект заметен сразу. У Донки Конга, например, шерсть становится гораздо более проработанной, а освещение приобретает мягкие тени и дополнительный объем. Но при движении возникают проблемы: мелкие объекты могут деформироваться, отдельные элементы сцены начинают «плыть», а искусственные тени появляются там, где их быть не должно.

Иногда нейросеть также неверно определяет свойства поверхности. Матовый объект может неожиданно начать выглядеть как отполированный пластик или металл.

За красивую картинку приходится платить FPS

Вдобавок эксперимент показывает, насколько ресурсоемким оказывается подобный нейрорендеринг. Даже ноутбучная RTX 5070 не справляется с обработкой 1080p без серьезного падения производительности — в тесте частота кадров держалась примерно на уровне 45 FPS.

Для самой Switch 2 такой сценарий тем более недостижим. Консоли пришлось бы одновременно запускать игру и обрабатывать каждый кадр крупной генеративной моделью, что создало бы совершенно несопоставимую нагрузку на ее аппаратную часть.

Автор отдельно отметил, что не планирует публиковать инструкции и файлы для повторения эксперимента. Пока фотореалистичные версии игр Switch 2 остаются скорее технологической демонстрацией. 

Красивой, местами странной и требующей мощного ПК за пределами самой консоли.

Большая скидка — 16% на все курсы Практикума

Если вы читаете эту новость, тогда вы точно разбираетесь в технологиях. Стать лучше и зарабатывать больше можно после курсов Практикума — по искусственному интеллекту, анализу данных и программированию.

До 17 сентября на все курсы действует скидка 16%, она применится автоматически при оплате!

В Практикуме есть программы для начинающих и специалистов с опытом, которые хотят обновить знания или освоить новое направление.

Соцсети: Юлия Зубарева
Через год — лучше работа, выше зарплата
В «Яндекс Практикуме» становятся разработчиками с нуля. Выберите язык — веб, Python, Java, C++ — и учитесь. Джуны зарабатывают от 80 000 ₽, мидлы — от 150 000 ₽. Дальше — программы трудоустройства и компенсация, если пойдёте в Яндекс.
Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата Через год — лучше работа, выше зарплата
Вам может быть интересно
easy