
字节笔记本
2026年10月3日 · 约 6 分钟读完
Meta 开源 Muse 硬件 SDK,coding agent 从此有了手和脚
AI agent 目前绝大多数时间活在浏览器和终端里,能操作的都是比特世界的东西。Meta 在 10 月初把这件事往前推了一步:开源 Muse Gadgets 的 SDK 和固件,让你用现成的开发板给 Muse 这个个人 agent 做实体外设。Nat Friedman 的宣布帖拿到了 69 万浏览和 4600 多个赞,仓库 facebookincubator/muse-gadget-sdk 创建于 10 月 2 日,Apache-2.0 协议,一天时间星数还在快速爬坡。

项目简介
Muse Gadgets 的定位是「你自己动手做的开源设备」。官方给两条路线:手上有 ESP32 开发板的,用 ESP32 Device SDK 刷机,接屏幕显示内容、接音频输入输出、连各种传感器;家里有闲置树莓派或 Linux 盒子的,装 Linux Device SDK 把它变成一台 Muse gadget,还能自己写命令让 Muse 帮你处理系统管理杂活或者接管 Home Assistant 智能家居。
整套东西由 Meta 的黑客团队做出官方腔调反而很淡,README 开头就写着「built by hackers, for hackers, just for fun」,还提醒你刷机有变砖风险。仓库里每个目录除了入门 README 之外都放了一份 AGENTS.md,明确写着给 Muse Code 这类 coding agent 看:官方的说法是,把这个 repo 指给你的 agent,它就能帮你完成刷机。

核心功能
ESP32 Device SDK。 覆盖屏幕、音频和传感器三类外设,官方演示里用的都是几十块钱的现货开发板,比如 Waveshare 圆形 AMOLED 和 M5Stack StickS3。加一块屏就能给 Muse 做一个桌面状态显示器,接上麦克风和喇叭它就能在你房间里有声音,再连几个传感器,agent 就多了温度、光照这些真实世界的输入。固件开源,带模拟器可以不上板先调试。
Linux Device SDK。 把树莓派或任何 Linux 机器注册成 gadget,开放自定义命令接口,等于给 Muse 加了一个能执行任意本地任务的实体入口。
配对与令牌。 每台 gadget 需要在 gadgets.muse.ai 的设置页生成 SDK token 才能配对,iOS 和 Android 应用里开 Developer mode 后搜索 MuseGadget 前缀的设备即可。开源归开源,设备接入走的还是官方账号体系。
配套硬件 Home Link。 同步发布的 Muse Home Link 是一个 USB-C 小盒子,限量 5000 台,美区订阅用户免费领,作用是把 Muse 接到家里的电视、音箱等设备上。官方不靠卖硬件赚钱的意图很明显:盒子送出去,SDK 开出来,生态自己做。
模拟器与构建链。 ESP32 SDK 自带基于 LVGL 和 SDL 的桌面模拟器,界面逻辑可以先在电脑上跑通再上板,省掉反复烧录的等待;固件构建走标准 ESP-IDF 工具链,依赖在构建时自动拉取。
快速上手
最省事的路径是全部交给 coding agent:克隆仓库,把项目目录指给你的 agent,AGENTS.md 里写清了构建和刷机流程。手工路径是装 ESP-IDF 工具链后进 esp32 目录构建烧录,或者在一台树莓派上跑 Linux SDK 的安装脚本。刷完机在手机 App 的 Devices 页面配对,token 在官网设置页申请,配对前记得先开 Developer mode。
社区交流在官方 Discord,已经有人把 gadget 移植到了会议胸牌常用的 RP2350 开发板上,跑 MicroPython 也能接入。播放声音用的 minimp3、屏幕字体用的 Adafruit 点阵字体这些第三方部件都在 LICENSE 表里列明了上游协议,二次分发时照表处理即可。
为什么值得注意
给 agent 配硬件这件事,过去两年见过不少闭源样本,要么是整台卖的高价盒子,要么是绑定云服务的套餐。Meta 这次把固件和 SDK 全部 Apache-2.0 放出来,等于承认了一个事实:硬件形态的想象力做不完,交给黑客社区比自己做快。对你的实际意义是,agent 产品的硬件周边第一次有了一套可以自由魔改的参考实现,从设备协议、配对流程到 token 鉴权全部透明。
适合谁用
手里有开发板存货、想给 AI agent 加实体按键和屏幕的硬件爱好者,第一梯队;用 Home Assistant 的智能家居玩家是第二梯队,Linux SDK 的自定义命令天然适合做语音控制的家居入口;如果你在给 agent 产品做硬件形态的调研,这套 Apache-2.0 的 SDK 加固件是很好的参考实现,从协议到配对流程都是现成答案。
agent 与物理世界的接口,大厂选择用开源换生态,这一局的样本价值比 417 颗星本身高得多。顺带一提,这是 Meta 本周对 Muse 生态的第二次开源动作,此前开放的是终端里的 coding agent,这次轮到终端外的设备。一个做软件订阅的公司把护城河往硬件社区里修,接下来值得盯的是社区会先长出什么杀器级的第三方 gadget。仓库地址:facebookincubator/muse-gadget-sdk。



