Meta выпустила Muse Gadgets для создания собственных ИИ-устройств

Meta представила Muse Gadgets — платформу с открытым исходным кодом, которая позволяет подключать ИИ-агента Muse к физическим устройствам. Разработчики могут использовать ESP32, Raspberry Pi или другой Linux-компьютер, добавляя к ним экраны, кнопки, микрофоны, динамики и датчики. Это расширяет возможности Muse за пределы программного интерфейса и позволяет использовать агента в самодельных ИИ-устройствах.

Как работает Muse Gadgets

Для создания устройства достаточно использовать совместимое оборудование, установить SDK и подключить необходимые компоненты. После настройки Muse получает возможность взаимодействовать с ними в рамках своей работы.

Такой подход позволяет собирать собственные устройства под конкретные сценарии. В качестве примеров можно представить настольного ИИ-помощника с экраном, голосового ассистента или дисплей, который используется для отображения напоминаний.

SDK и прошивки Muse Gadgets опубликованы под лицензией Apache 2.0. Открытая лицензия делает платформу ориентированной на самостоятельную разработку и эксперименты с аппаратной частью.

Muse Home Link для управления устройствами

Одновременно с Muse Gadgets Meta показала Muse Home Link — небольшой USB-девайс на базе ESP32-C5. Он предназначен для подключения Muse к домашней сети.

Через готовые навыки агент может взаимодействовать с различными устройствами в доме, включая Philips Hue, телевизоры и колонки. В исходных сценариях Meta указывает такие действия, как включение света, управление телевизором и отправка документа на принтер.

Таким образом, Muse Home Link дополняет аппаратную платформу возможностью использовать ИИ-агента не только в самостоятельно собранном устройстве, но и для взаимодействия с уже существующей домашней техникой.

Что это дает разработчикам

Muse Gadgets объединяет ИИ-агента и доступное одноплатное оборудование в одном сценарии разработки. Вместо создания отдельного программного интерфейса разработчик может подключить физические элементы и сделать их частью взаимодействия с Muse.

Практическое применение зависит от выбранных компонентов. Экран может использоваться для вывода информации, микрофон и динамик — для голосового взаимодействия, а кнопки и датчики — для получения физических сигналов от пользователя или окружающей среды.

Платформа представляет интерес прежде всего для разработчиков и энтузиастов, которые хотят экспериментировать с собственными ИИ-устройствами и интеграцией Muse с физическим оборудованием.

Подробнее о платформе можно узнать на странице Muse Gadgets: https://gadgets.muse.ai/