После утечки библиотеки DLSS 5 компания NVIDIA наконец-то прервала молчание и официально анонсировала скорый релиз новой технологии. Запуск DLSS 5 произойдет вместе с баскетбольной игрой NBA 2K27 уже совсем скоро — 3 сентября 21:00 по тихоокеанскому времени (4 сентября 07:00 по Москве). Новая функция будет называться DLSS Neural Rendering и будет доступна на всех видеокартах десктопного и мобильного класса семейства GeForce RTX 50, а также в сервисе GeForce Now.
Также выпущено видео, в котором озвучены некоторые детали о NVIDIA DLSS 5. Что-то уже озвучивалось ранее, что-то показали впервые. При реализации этой технологии инженеры решали три основные задачи:
- Сохранение художественного замысла персонажи
- Согласованная покадровая генерация
- Быстрая генеративная модель для работы в реальном времени
Технология DLSS 5 не какой-то фильтр постобработки, она использует данные движка, векторы движений и сцены. Это обеспечивает полное сохранение композиции и фиксацию семантики сцены. Генеративная модель работает по принципу кадр на входе – кадр на выходе, обеспечивая согласованность и стабильность изображения. Также у данной модели одна задача – повышение фотореализма благодаря улучшению освещения и материалов.
В видео показано несколько примеров того, как DLSS 5 улучшает освещение кожи, проработку деталей и мельчайших контактных теней на лице. То есть геометрия оригинальной модели никак не меняется, как и ее начальные параметры. Также это позволяет серьёзно улучшить материалы окружения и их взаимодействие со светом. Модель определяет тип материалов и в соответствии с этим вводит разные улучшения для разных элементов.
DLSS 5 имеет три модели и гибкие настройки интенсивности обработки. Разработчики получают полный контроль с регулировками интенсивности каждой модели. Можно сочетать разные модели для разных помещений и локаций. А маски позволяют гибко настраивать любую игровую сцену.
Стоит отметить, что NVIDIA постоянно работает над улучшением модели DLSS 5. Если в марте ее запускали на двух GeForce RTX 5090, то за полгода производительность увеличили примерно в пять раз. Это сделало нейронный рендеринг доступным для запуска на одной видеокарте. Пока заявлена совместимость только с моделями семейства GeForce RTX 50. Приводятся тесты GeForce RTX 5090/5080 в NBA 2K27, согласно которым, даже в 4K старшие видеокарты выдают 370 fps и 233 fps с трассировкой лучей и многокадровой генерацией 6X.
В целом мы видим, что технология ресурсоемкая, но действительно может обеспечить вау-эффект. Официальная реализация в играх будет более сбалансированной благодаря гибким настройкам от разработчиков. Также модель будут улучшать и оптимизировать, поэтому в будущем можно ожидать и повышение производительности. Но очевидно, что потребление памяти на видеокарте с еще одной моделью ИИ только повысится.
Также сделан акцент на том, что нейронный рендеринг DLSS Neural Rendering (DLSS 5) лишь дополняет конвейер. Качественный ввод дает более качественный результат на выходе. Поэтому компания и далее будет развивать DLSS Super Resolution, Ray Reconstruction, трассировку пути и трассировку лучей.
