На конференции SIGGRAPH компания NVIDIA представила обновлённую версию технологии DLSS 5. Присутствующим продемонстрировали заметные изменения по сравнению с первой презентацией, которая вызвала неоднозначную реакцию геймеров, разработчиков и в целом всего игрового сообщества. Тогда многие критиковали компанию за чрезмерное использование искусственного интеллекта, который сильно меняет картинку, искажая изначальный художественный замысел создателей игры. Кажется, NVIDIA прислушалась к критике и сделала акцент на сохранении оригинальной графики и гибкости настройки.
Главным нововведением стали три ИИ-модели обработки изображения, которые разработчики могут использовать в разных сценах одной игры и даже для отдельных объектов внутри кадра. Например, для персонажей можно применить одну модель, а для окружающего мира — другую, либо вовсе отключить ИИ-обработку. Переключение между моделями происходит в режиме реального времени. NVIDIA утверждает, что такой подход позволяет динамически менять качество обработки изображения в зависимости от ситуации, но при этом не приводит к увеличению задержки.
В основе DLSS 5 по-прежнему лежит классическая технология масштабирования. Дополнительные ИИ-эффекты применяются уже после апскейлинга для улучшения картинки и являются отдельным этапом. В NVIDIA отметили, что решили три основных проблемы. Первая заключалась в сохранении художественного замысла, чтобы ИИ не менял внешний вид игры. Вторая связана с задержкой. Большинство генеративных ИИ-моделей анализируют сразу несколько кадров одновременно, но это может плохо влиять на отзывчивость, поэтому DLSS 5 выполняет обработку каждого кадра отдельно и практически не оказывает влияния на время отклика. Третья проблема касается производительности. Новая версия технологии может работать на одном графическом процессоре и более эффективно использует видеопамять.
NVIDIA сообщила, что добиться обработки изображения в режиме реального времени при разрешении 4K удалось благодаря созданию более компактной модели искусственного интеллекта, обученной на основе более крупной диффузионной модели. Ожидается, что технология DLSS 5 будет доступна в третьем квартале этого года.
