Meta liberó Muse Gadgets, un kit de desarrollo de software (SDK) de código abierto que permite a los makers conectar su agente de IA a hardware propio, informó Hackster.io el 12 de octubre. Muse es el agente personal que Meta presentó hace poco para ayudar en tareas diarias, responder preguntas y operar servicios digitales. Como otros asistentes, vive sobre todo en el software, y con este kit la compañía busca darle presencia en el mundo físico.

Muse Gadgets funciona con microcontroladores ESP32 y con computadores Linux como la Raspberry Pi. En vez de construir un asistente desde cero, el desarrollador usa el SDK para darle a Muse acceso a pantallas, micrófonos, parlantes, botones, sensores y actuadores. Con eso se puede armar desde una interfaz de casa inteligente controlada por voz hasta un asistente de escritorio que muestra información y reacciona a entradas físicas.

Dos SDK según la placa

Meta publicó dos SDK separados. El ESP32 Device SDK apunta a proyectos con microcontrolador y permite conectar pantallas, manejar entrada y salida de audio e interactuar con sensores y otra electrónica externa. El Linux Device SDK está pensado para la Raspberry Pi y otros computadores Linux, y suma ejecución de comandos personalizados, automatización de tareas de administración del sistema e integración con Home Assistant.

Ya hay varios proyectos de ejemplo para partir:

  • Uno usa la Waveshare ESP32-S3-Touch-AMOLED-1.75C, con pantalla táctil AMOLED redonda de 1,75 pulgadas, micrófono, parlante y batería.
  • Otro usa la Seeed reTerminal E1002, una pantalla de tinta electrónica a color que muestra resúmenes del día, recordatorios, listas de compras y otra información que entrega Muse.
  • Una Raspberry Pi 5 sirve para conectar Muse con Home Assistant y otras aplicaciones Linux.

Meta además desarrolla un stick HDMI para hablar con Muse desde el televisor, aunque todavía no entregó detalles de ese hardware.

¿Qué trae Muse Home Link?

Para quien prefiera saltarse el armado, Meta diseñó un equipo listo llamado Muse Home Link. Se conecta a la red Wi-Fi de la casa y le permite a Muse comunicarse con dispositivos domóticos compatibles y otros equipos mediante API HTTP locales.

Home Link usa un microcontrolador ESP32-C5, con Wi-Fi 6 de doble banda, Bluetooth LE e IEEE 802.15.4 para Zigbee y Thread. Trae 8 MB de memoria flash, 8 MB de PSRAM, un puerto USB-C y un LED. Meta lo repartirá gratis a los suscriptores activos de Muse en Estados Unidos mientras haya stock.

¿Qué se necesita para empezar?

Quien quiera construir su propio dispositivo necesita un token del SDK y la aplicación móvil de Muse para emparejarlo. Los SDK y el firmware están publicados en GitHub con licencia Apache 2.0, salvo algunos componentes de terceros que mantienen su licencia original. El repositorio oficial del SDK tiene la documentación y los ejemplos para partir con Muse Gadgets.