DLSS 5: Нейросеть как финальный штрих, а не генератор
Главное нововведение — 3D-Guided Neural Rendering. В отличие от генеративных моделей, создающих кадры с нуля, DLSS 5 использует отрендеренный движком кадр как «незыблемый фундамент». Нейросеть добавляет реалистичное освещение, субsurface-рассеивание и текстуры, но строго сохраняет геометрию, позы персонажей и композицию кадра, заданные художниками.
Архитектура работает по принципу one-frame-in, one-frame-out с использованием векторов движения движка. Это гарантирует детерминированность и временную стабильность изображения без «дрожания» артефактов. Модель оптимизирована для локального запуска на GeForce RTX 50 Series при разрешении до 4K.
Контроль художника: от масок до интенсивности
Разработчики получают тонкие инструменты настройки, чтобы ИИ не переписывал арт-дирекшн:
- Model Selection: Выбор разных моделей под сцены, геймплей или кат-сцены.
- Structure & Tone Intensity: Регулировка высокочастотных деталей и общего тона/освещения.
- Semantic AI Masking: ИИ понимает элементы сцены (вода, стекло, листва) и применяет эффекты точечно.
- Engine-level Masking: Изоляция конкретных пропов или групп ассетов.
Практика: NBA 2K27 и сохранение лиц
Первым титлом с DLSS 5 стала NBA 2K27 от Visual Concepts. Технология позволяет сохранять отсканированную геометрию лиц игроков, одновременно улучшая:
- Субsurface-рассеивание кожи.
- Пропускание света через волосы и уши.
- Контактные тени и материальную детализацию.
Разработчики используют маски повышения детализации на пиксельном уровне, чтобы ИИ не искажал узнаваемость атлетов.
Сравнение подходов: DLSS 5 vs Традиционный апскейлинг
| Параметр | Традиционный DLSS (3.x) | DLSS 5 (3D-Guided Neural Rendering) |
|---|---|---|
| Базовая входная точка | Низкоразрешенный кадр + векторы | Полный кадр движка + буферы освещения |
| Роль ИИ | Реконструкция пикселей, сглаживание | Добавление материалов, света, детализации |
| Контроль арта | Минимальный (настройка качества) | Полный (маски, интенсивность, выбор модели) |
| Стабильность | Высокая | Высокая (детерминированная, frame-to-frame) |
| Требования к GPU | RTX 40/30 Series | GeForce RTX 50 Series |
Обновления NVIDIA ACE и In-Game Inferencing SDK
Параллельно обновлена платформа NVIDIA ACE для создания NPC:
- Nemotron Speech 3.5 Streaming: Модель распознавания речи (ASR) на 600M параметров с минимальной задержкой.
- Qwen3 TTS: Модель синтеза речи (600M параметров) с поддержкой кастомной дообучки.
- RTX Spark Support: Предрелизная поддержка платформы для тонких ноутбуков и энергоэффективных ПК.
- Gemma4 & Stable Diffusion: Интеграция новых моделей в плагин GPT и новые плагины для генерации изображений.
RTX Mega Geometry 2.0
В SDK добавлена поддержка потоковой передачи непрерывных кластеров детализации (LOD) для высокоплотных мешей. Технология уже демонстрируется на ассетах Zorah и скоро появится в Gears of War: E-Day, позволяя рендерить сцены с огромным количеством полигонов без потери производительности.
Источник: NVIDIA dev blog ↗