Народна DLSS 5: нейронний рендеринг NVIDIA запустили на Intel Arc 140V

Модер запустив експериментальну реалізацію DLSS 5 NR на iGPU Intel Arc 140V.

Зокрема, в експерименті використовується графічний процесор Xe2, інтегрований в Intel Core Ultra 7 256V й система під керуванням Linux з драйверами Mesa. Зазначається, що це не просто DLL-бібліотека NVIDIA DLSS, реалізація самостійно перероблює процедуру виведення нейронного рендерингу й виконує функції нейромережі на процесорах Intel XMX. 

Розробка працює через Vulkan VK_KHR_cooperative_matrix з FP16 та накопичуванням FP32. Для роботи реалізація не вимагає ядер CUDA або NVIDIA NGX. За словами розробника, реконструйована мережа складається з 71-блокової U-Net, а обробка даних проводиться на графічному процесорі.

Користувачі мають надати власні DLSS-файли, а реалізація вилучає з них необхідні ваги. NVIDIA зберігає їх у форматі FP8, однак вони перетворюються на FP16 для виконання на Xe2. Розробник протестував свій проєкт у Dead or Alive 5 Last Round, Tekken 7 та Mortal Kombat 1. Тести продемонстрували близько 3-5 FPS за роздільної здатності 720p та близько 1,5-2 FPS — за 1080p.

Останні результати показують, що Tekken 7 видає 10,5 FPS за роздільної здатності 640×360. За 1920×1080 сам нейронний рендеринг займає близько 412 мс. Графічний процесор Arc 140V має 8 ядер Xe. За твердженням Intel, його продуктивність складає до 64 INT8 TOPS в моделі Intel Core Ultra 7 256V. 

Для роботи реалізації також необхідно близько 2,3 ГБ загальної системної пам’яті для буферів пристроїв за роздільної здатності 720p. Наразі головним питанням залишається не запуск DLSS 5 NR на iGPU Intel Arc 140V, а ефективність реалізації. Intel поки не оголошувала про плани з розробки власної моделі нейронного рендерингу. Однак оскільки власну технологію вже представила AMD, можливо це лише питання часу.

Джерело: VideoCardz; Github