Генерирует на лету: Fal представила самую быструю ИИ-модель генерации видео

Генерує на льоту: Fal представила найшвидшу ШІ-модель генерації відео

Fal показала свою ИИ-модель генерации видео H3 Max Live, которая генерирует видео в режиме реального времени по указаниям пользователя.

Отмечается, что H3 Max Live способна обеспечить непрерывный поток генерации видео, где каждый фрагмент генерируется в режиме реального времени на основе пользовательских промптов. До сих пор скорость генерации видео никогда не превышала продолжительности просмотра.

Даже модели согласованности, позволившие сократить время генерации до примерно одной секунды, не устранили проблемы со скоростью генерации кадров, которая оставалась неприемлемой для восприятия человеком. В основе H3 Max Live лежит новая ИИ-модель H3 от Minimax. Специалисты из Fal дополнительно обучили модель на собственных наборах данных, чтобы улучшить качество и стоимость генерации и адаптировать под собственный движок.

В компании утверждают, что модель в 35 раз быстрее, чем официальная API-модель. В чате пользователи могут определять сюжет сцен с помощью промптов, а новые сцены будут появляться на экране в течение нескольких секунд.

Одним из первых на новую модель обратил внимание исследователь ИИ Итан Моллик. На своей странице в X он отметил, что предел в сфере Генерации ИИ перейден. По результатам собственных тестов, проведённых с использованием исключительно веб-интерфейса, H3 Max способен генерировать качественное видео быстрее, чем длится его просмотр.

Сотрудники Fal добавили модель в трансляцию на Twitch, где H3 Max Live продемонстрировала бесконечный поток генерации видео. По словам инженера компании Рехана Шейха, это как “бесконечное межпространственное телевидение”, где каждая новая сцена создается мгновенно.

Fal также запустила собственный сервис Fal.live для непрерывной генерации видео и взаимодействия с моделью в чате, поскольку Twitch и YouTube практически мгновенно заблокировали аккаунт компании.

Однако на данный момент контент пока нельзя назвать высококачественным. Большинство роликов в основном выглядят хаотично или содержат фрагментарный сюжет. Качество изображения также неравномерно. Однако подобное ускорение времени генерации видео уже само по себе является прорывом.

Источник: Latent Space

Источник материала
loader
loader