Народная DLSS 5: нейронный рендеринг NVIDIA запустили на Intel Arc 140V

Моддер запустил экспериментальную версию DLSS 5 NR на iGPU Intel Arc 140V.

В частности, в эксперименте используется графический процессор Xe2, встроенный в Intel Core Ultra 7 256V и система под управлением Linux с драйверами Mesa. Отмечается, что это не просто DLL-библиотека NVIDIA DLSS, реализация самостоятельно перерабатывает процедуру вывода нейронного рендеринга и выполняет функции нейросети на процессорах Intel XMX.

Реализация работает через Vulkan VK_KHR_cooperative_matrix с FP16 и накоплением FP32. Для работы реализация не требует ядер CUDA или NVIDIA NGX. По словам разработчика, реконструированная сеть состоит из 71-блочной U-Net, а обработка данных осуществляется на графическом процессоре.

Пользователи должны предоставить собственные DLSS-файлы, а реализация извлекает из них необходимые веса. NVIDIA сохраняет их в формате FP8, однако они преобразуются в FP16 для выполнения на Xe2. Разработчик протестировал свой проект в играх Dead or Alive 5 Last Round, Tekken 7 и Mortal Kombat 1. Тесты показали прирост примерно 3–5 FPS при разрешении 720p и около 1,5–2 FPS — при 1080p.

Последние результаты показывают, что Tekken 7 выдает 10,5 FPS при разрешении 640×360. При разрешении 1920×1080 сам нейронный рендеринг занимает около 412 мс. Графический процессор Arc 140V имеет 8 ядер Xe. По утверждению Intel, его производительность составляет до 64 INT8 TOPS в модели Intel Core Ultra 7 256V. 

Для работы реализации также требуется около 2,3 ГБ общей системной памяти для буферов устройств при разрешении 720p. На данный момент главным вопросом остается не запуск DLSS 5 NR на iGPU Intel Arc 140V, а эффективность реализации. Intel пока не объявляла о планах по разработке собственной модели нейронного рендеринга. Однако, поскольку собственная технология уже представила AMD, возможно, это лишь вопрос времени.

Источник: VideoCardz; Github