Nvidia выпускает спорную технологию DLSS 5
Nvidia выпускает спорную технологию DLSS 5, использующую генеративный ИИ для применения графических фильтров к уже существующим играм. Технология выходит на этой неделе, но пока только для одной игры — NBA 2K7. Драйверы GeForce с поддержкой DLSS 5 станут доступны в США в ночь на четверг (21:00 по тихоокеанскому времени) и ранним утром пятницы по британскому времени (5:00). Поддерживаются только графические карты серии GeForce 50, ноутбуки с ними и облачный сервис GeForce Now.
Ключевая особенность DLSS 5
Ключевой и самым обсуждаемой частью DLSS 5 является «нейронная визуализация» (neural rendering), которая, по словам Nvidia, выходит за рамки прежней функции DLSS по улучшению производительности и направлена на «трансформацию визуальной достоверности». Если предыдущие версии DLSS концентрировались на реконструкции существующих данных сцены для получения изображений более высокого разрешения, дополнительных кадров или более чистого трассированного освещения, то DLSS 5 с 3D-управляемой нейронной визуализацией делает следующий шаг: с помощью ИИ генерирует насыщенные световые и материальные детали, которые ранее в реальном времени приходилось убирать из-за ограничений производительности, позволяя разработчикам приблизиться к изначальному художественному замыслу.
Отличия от предыдущих технологий
В отличие от генерации кадров по текстовым подсказкам, 3D-управляемая нейронная визуализация использует отрисованный движком кадр со всей его геометрией, текстурами и буферами освещения как неизменную основу. DLSS 5 становится финальным этапом рендеринга графического конвейера, добавляя в сцены реалистичное освещение и материалы при условии, что движок-каркас задаёт то, что должно остаться, а художник — то, что может измениться.
Критика и обсуждения
Именно примеры «приближения к изначальному художественному замыслу» вызвали широкую критику ранее в этом году, когда Nvidia показала изображения главной героини Resident Evil Requiem Грейс Эшкрофт, изменённой нейронной визуализацией в DLSS 5. Её лицо выглядело заметно иначе — не всегда к лучшему — и в соцсетях разразились обвинения в «yassify» — искусственном «улучшении» внешности по искажённым фильтрам социальных сетей. Также накануне официального релиза появились утечки изображений лиц игровых персонажей, изменённых DLSS 5. Моддеры протестировали технологию в Control от Remedy, а также экспериментировали с DLSS 5 в GTA 5, Cyberpunk 2077 и The Witcher 3; внешний вид Геральта в одном из модов выглядел значительно старее.
Объяснение процесса нейронной визуализации
В своём последнем блоге Nvidia подробно объяснила процесс нейронной визуализации, показав более сдержанные примеры и подчёркнув такие вопросы, как «сохранение художественного замысла» и контроль со стороны разработчиков и игроков: DLSS 5 можно использовать в малой или большой степени, а при желании — вовсе отключить. Пара скриншотов «до и после» из NBA 2K7 показывает, что освещение на баскетболистах Кэйда Каннингема и Тайриса Хэлибёртона выглядит более реалистичным.
Проблемы с производительностью
Однако кроме этических вопросов, связанных с генеративным ИИ, сообщается и о проблемах с производительностью. Иронично для технологии, прежде ассоциировавшейся с повышением производительности, DLSS 5 заметно влияет на частоту кадров. В блоге Nvidia графики демонстрируют высокие значения FPS, но, как заметили в PC Gamer, они основаны на шестиразовой мультигенерации — значения были умножены на шесть. Если обратить это во внимание, картина меняется: в эффективных условиях производительности видеокарта GeForce RTX 5060 в хорошем компьютере обеспечивает в NBA 2K7 1080p на ультра-настройках около 43 FPS, а флагманская GeForce RTX 5090 лишь немного превышает 60 FPS в 4K на ультра.
Прогресс и будущее DLSS 5
Тем не менее, это прогресс по сравнению с периодом анонса DLSS 5, когда для демонстрации требовались две 5090. Nvidia утверждает, что с момента первого объявления DLSS 5 прогресс был быстрым: от работы на двух GeForce RTX 5090 до работы на одной карте, достигнув пятикратного прироста производительности за несколько месяцев, благодаря чему DLSS 5 стал доступен для всех графических карт и ноутбуков серии GeForce RTX 50. Компания отмечает, что кривая оптимизаций не выровнялась и что в активной разработке находятся дополнительные улучшения, которые, как ожидается, в ближайшем обновлении моделей повысят производительность по сравнению с текущим базовым уровнем.
Заключение
Подкреплённая многолетним опытом разработки DLSS, Nvidia заявляет о приверженности дальнейшему расширению границ производительности и качества изображения и называет это началом новой эры, объединяющей классический рендеринг и нейронную графику для значительного скачка в визуальной реалистичности при сохранении контроля художников над творческим выражением. Поддержка объявлена для консолей и платформ разных типов, включая предполагаемые следующие поколения портативных и стационарных игровых устройств.