NVIDIA анонсировала DLSS 5 на базе нейронного рендеринга для фотореалистичной графики

В DLSS 5 основной упор делается не только на повышение производительности, но и на улучшение визуального качества изображения. Технология использует модель нейронного рендеринга, которая анализирует сцену и улучшает освещение, материалы и мелкие детали изображения.

DLSS 5 объединяет рендеринг и генеративный ИИ

Генеральный директор NVIDIA Дженсен Хуанг сравнил появление новой технологии с переломным моментом для всей индустрии компьютерной графики.

«Спустя двадцать пять лет после того, как NVIDIA изобрела программируемые шейдеры, мы снова переосмысливаем компьютерную графику. DLSS 5 — это GPT-момент для графики: сочетание традиционного рендеринга и генеративного искусственного интеллекта, которое обеспечивает огромный скачок в визуальном реализме, сохраняя при этом творческий контроль художников».

В NVIDIA отмечают, что DLSS 5 не заменяет традиционный рендеринг, а работает поверх уже сформированной сцены, улучшая её визуальные характеристики с помощью нейросетевых моделей.

Как работает DLSS 5

DLSS 5 использует данные каждого кадра игры — цветовую информацию и векторы движения — которые передаются в модель искусственного интеллекта. Нейросеть анализирует сцену и улучшает освещение, материалы и мелкие детали изображения, сохраняя привязку к исходной 3D-графике.

Технология работает в реальном времени и способна обрабатывать изображение при разрешении до 4K. При этом алгоритмы сохраняют стабильность изображения между кадрами, что важно для игр и предотвращает появление визуальных артефактов.

Модель обучена распознавать различные элементы сцены, такие как персонажи, волосы, ткани и полупрозрачные поверхности, а также учитывать условия освещения. Это позволяет более точно передавать сложные эффекты, такие как подповерхностное рассеяние света на коже, отражения и взаимодействие света с материалами.

NVIDIA отмечает, что DLSS 5 не просто улучшает изображение, но и позволяет разработчикам гибко управлять результатом. С помощью параметров интенсивности, цветокоррекции и маскирования художники смогут точно контролировать влияние ИИ-обработки на итоговую картинку. Это позволяет сохранять уникальный визуальный стиль каждой игры и при необходимости исключать отдельные элементы сцены из обработки.

Интеграция технологии выполняется через фреймворк NVIDIA Streamline, который уже используется для внедрения DLSS и NVIDIA Reflex в игровые движки.

Поддержка со стороны игровых студий

Поддержку DLSS 5 уже подтвердили многие крупные издатели и разработчики, включая Bethesda, CAPCOM, Ubisoft, NetEase, Tencent и Warner Bros. Games.

Среди первых игр, которые получат поддержку DLSS 5, называются:

• Starfield
• Assassin’s Creed Shadows
• Hogwarts Legacy
• Resident Evil Requiem
• Delta Force
• NARAKA: BLADEPOINT
• The Elder Scrolls IV: Oblivion Remastered

Первые демонстрации технологии

Журналисты Digital Foundry уже получили возможность ознакомиться с ранней демонстрацией DLSS 5. По их словам, технология действительно способна заметно улучшать освещение, материалы и общее восприятие сцены.

Поддержка архитектур пока не подтверждена

По данным Digital Foundry, во время демонстрации NVIDIA использовала необычную конфигурацию из двух видеокарт RTX 5090.

На демонстрациях NVIDIA фактически использовала две видеокарты RTX 5090: одна запускала игру, а вторая выполняла исключительно обработку DLSS 5. Использование двух GPU сейчас необходимо, поскольку технология всё ещё требует значительной оптимизации — как с точки зрения производительности, так и потребления видеопамяти.

При этом DLSS 5 изначально разрабатывается для работы на одной видеокарте, и именно так технология будет использоваться при релизе позже в этом году. Насколько хорошо она масштабируется, пока неизвестно, однако, как и в других технологиях DLSS, вычислительная нагрузка зависит от выбранного разрешения.

Digital Foundry

NVIDIA пока не уточнила, какие архитектуры видеокарт получат поддержку DLSS 5.