Meta открыла исходный код Muse: пользователи могут создавать собственные гаджеты с ИИ

Компания Meta открыла исходный код для создания собственных устройств на базе агента искусственного интеллекта Muse. Пользователи смогут запускать его на микрокомпьютерах Raspberry Pi и платах ESP32, а также подключать дополнительное оборудование. Meta также подготовила собственный гаджет Muse Home Link для управления совместимыми устройствами в доме, сообщает The Verge.

Открытый исходный код позволяет энтузиастам самостоятельно создавать устройства, взаимодействующие с Muse. Для этого Meta предлагает программный набор SDK — инструменты, необходимые для подключения ИИ-агента к различному оборудованию.

В частности, Muse можно установить на Raspberry Pi — небольшой одноплатный компьютер, который часто используют для собственных электронных проектов. Также поддерживается ESP32 — компактная микросхема с поддержкой беспроводной связи, которую можно запрограммировать для работы с различными компонентами. К таким платам можно подключать дисплеи, кнопки, микрофоны, динамики, датчики и другие устройства.

Meta предлагает несколько готовых идей для таких проектов. Среди них — Raspberry Pi 5 для взаимодействия Muse с Home Assistant и другими программами для Linux, а также компактное устройство с сенсорным AMOLED-экраном, микрофоном, динамиком, аккумулятором и кнопкой Push-to-Talk, которая позволяет активировать голосовое взаимодействие одним нажатием.

Ещё один проект предусматривает подключение Muse к телевизору через HDMI-стик — небольшое устройство, которое вставляется в HDMI-порт и передаёт изображение на экран. В таком случае информацию от Muse можно будет выводить на большой дисплей.

Среди других вариантов — карманный M5Stack StickS3 с цветным экраном и кнопкой для отображения состояния Muse. Также Meta предлагает Seeed reTerminal E1002 с цветным дисплеем на электронных чернилах, где можно отображать утреннюю сводку, напоминания или список покупок.

«Последствиями таких экспериментов могут стать выход платы из строя, аннулирование гарантии, сбои в электропитании или даже банкротство. Действуйте на свой страх и риск!» — предупреждают в Meta.

Кроме того, Meta разработала Muse Home Link — устройство, которое подключается к домашней Wi-Fi-сети и позволяет Muse взаимодействовать с совместимой техникой. С помощью функций, созданных сообществом пользователей, агент может, в зависимости от настроек, включать свет, управлять телевизором или отправлять документы на печать.

Для взаимодействия с собственными системами можно использовать локальный HTTP API — набор правил, благодаря которому различные программы и устройства могут обмениваться командами через домашнюю сеть. Это позволяет подключать к Muse не только готовую технику, но и системы, которые пользователь создал самостоятельно.

По словам Нета Фридмана из подразделения Meta Superintelligence Labs, компания изготовила 5000 устройств Muse Home Link. Его могут бесплатно получить пользователи с активной подпиской на Muse в США, по одному устройству на подписчика. Отправка Muse Home Link должна начаться в октябре, а заказы будут обрабатываться в порядке очереди.

Ранее стало известно, что Meta будет обучать новый ИИ на реальных запросах пользователей, предложив скидку около 95% на модель Muse Spark тем, кто согласится делиться своими промптами и ответами системы. Компания пошла на такой шаг из-за дефицита данных для совершенствования агентных моделей.