Нещодавно власники відеокарт GeForce RTX отримали доступ до технології інтелектуального повноекранного згладжування завдяки запуску DLSS для Battlefield V і Metro Exodus слідом за додаванням методу в бенчмарки Final Fantasy XV: Windows, видання і 3DMark Port Royal. В обох шутерах картинка виявилася досить розмитою в порівнянні з тими ж Final Fantasy XV і 3DMark, що викликало розчарування і змусило технічного директора з глибинного навчання в NVIDIA Ендрю Едельстам (Ендрю благороднейший) дати розширений коментар у вигляді сесії відповідей на типові запитання в офіційному блозі.
Що таке DLSS?
Глибоке вивчення Супер Sampling (DLSS) - це технологія NVIDIA RTX, яка використовує можливості ІІ для підвищення частоти кадрів в іграх з інтенсивними графічними навантаженнями. Завдяки DLSS гравці можуть використовувати більш високі дозволу і настройки, зберігаючи при цьому прийнятну частоту кадрів.
Як працює DLSS?
порівняння ТАА з DLSS в Battlefield V
де DLSS дає найбільшу перевагу? І чому технологія недоступна для всіх дозволів?
Результати роботи DLSS трохи розрізняються, тому що кожна гра має різні характеристики в залежності від використовуваного движка, складності сцени і витраченого на навчання часу. Наш суперкомп'ютер ніколи не спить, і ми продовжуємо навчати і вдосконалювати нейронну мережу глибинного навчання навіть після запуску гри. Коли ми добиваємося поліпшень в області продуктивності або якості зображення, ми додаємо їх через оновлення програмного забезпечення NVIDIA.
DLSS призначений для підвищення частоти кадрів у важких режимах навантаження GPU (тобто коли частота кадрів залишається відносно низькою, незважаючи на повне завантаження відеокарти і відсутність вузьких місць). Якщо гра вже працює з високою частотою, час виведення кадрів може виявитися менше без виконання DLSS. В цьому випадку ми відключаємо DLSS, тому що алгоритм не збільшить частоту кадрів. Однак якщо гра інтенсивно використовує графічний процесор (приблизно нижче 60 кадрів / с), використання DLSS має сенс для підвищення продуктивності.
Якщо говорити більш технічно, DLSS вимагає фіксованого кількості часу GPU на кожен кадр для виконання нейронної мережі. Таким чином, гри, які відрізняються відносно низькою частотою кадрів або виконуються у високому дозволі, отримують більше переваг від DLSS. Для ігор, що працюють із високою частотою кадрів або в низькому дозволом, DLSS як засіб підвищення продуктивності може виявитися марний. Коли час візуалізації кадрів коротше, ніж потрібно для виконання моделі DLSS, ми не включаємо інтелектуальне згладжування. Воно активується лише у випадках, коли може дати приріст продуктивності. Доступність DLSS залежить від гри, графічного прискорювача і обраного дозволу.
Деякі користувачі скаржилися на розмиті кадри. Ви можете пояснити ситуацію?
DLSS - нова технологія, і ми докладаємо всіх зусиль для їхнього вирішення. DLSS створена з прицілом на використання тензорних ядер архітектури Turing і забезпечення найбільших переваг при високому навантаженні на GPU. Для цього ми сконцентрувалися на високій роздільній здатності під час розробки (де завантаження графічного процесора найвища), причому 4K (3840 × 2160) є найбільш поширеним цільовим дозволом. Робота з 4K дає більшу віддачу з точки зору якості зображення, так як кількість вхідних пікселів велике. Зазвичай у разі 4K модель DLSS має справу з 3,5-5,5 мільйонами входять пікселів, з яких можна згенерувати остаточний кадр, а у випадку з 1920 × 1080 є тільки 1-1,5 млн пікселів. Чим менше вихідних даних, тим складніше DLSS виявляти особливості вихідного зображення і передбачати остаточний кадр.
Ми бачили скріншоти і прислухаємося до відгуків спільноти щодо недоліків DLSS в більш низькій роздільній здатності і зараз віддаємо пріоритет покращенню стану справ в цій галузі. Ми додаємо більше даних для навчання нейронної мережі і використовуємо деякі нові методи для підвищення якості. І ця робота буде продовжуватися, щоб результати DLSS поліпшувалися з часом.
порівняння ТАА з DLSS в 3DMark
Чому б просто не використовувати замість цього зі зміненим розміром картинку з TAA?
Залежно від дозволу, налаштувань якості та реалізації гри деякі можуть віддати перевагу TAA в одній грі і DLSS в інший. Ігрова індустрія використовує TAA протягом багатьох років, і ми знаємо, що технологія має недоліки в певних речах. TAA генерується з декількох кадрів і може страждати від ореолів і мерехтінь при високій швидкості руху, а DLSS, як правило, справляється з цим краще.
Коли буде наступне оновлення DLSS для Battlefield V і метро результат?
Ми постійно працюємо над поліпшенням якості зображення. Нещодавно ми оновили ядро DLSS, щоб гравці отримували останні оновлення моделі разом з запуском гри. Тому переконайтеся, що у вас встановлений останній драйвер Game Ready (418.91 або вище).
Ми вважаємо, що DLSS в Battlefield V забезпечує значне поліпшення продуктивності в дозволах 4K і 2560 × 1440 (до 40 %) за порівнянної якості, але прислухаємося до товариства. В наступному оновленні ми зосередимо наші тести і навчання на поліпшенні якості зображення для дозволу 1920 × 1080, а також для сверхшірокоформатних моніторів (наприклад, з дозволом 3440 × 1440). Нинішня якість картинки в цих дозволах не перебуває на бажаному нами рівні.
Для Metro Exodus у нас вже є оновлення, поліпшує чіткість DLSS і загальну якість зображення для всіх дозволів, які не були включені в день запуску. Ми також навчаємо DLSS в розширених ситуаціях цієї гри, і як тільки оновлення будуть готові, ви побачите ще одне помітне підвищення якості. нарешті, ми постараємося вирішити і кілька інших проблем, про які повідомляли гравці (такі як HDR), і представимо оновлення, як тільки робота буде зроблена.
ТАА (зліва) проти DLSS в метро результат (фрагмент 4K) - чіткість DLSS істотно нижче
Бажаючі можуть ознайомитися з результатами тестів 3DNews в Metro Exodus: зв'язка з RTX і DLSS дійсно зараз дає досить посередню, «Мильну», картинку. Хоча в нашій лабораторії використовувався трохи старіший драйвер NVIDIA GeForce Game Ready Driver 417.71, судячи з усього, версія 418.91 поки не дає відчутної різниці.
