6月11日机智云携手火山引擎、扣子发起,联合CSDN、GitCode、广和通、奕斯伟、爱湾学院举办的“开源智联·具身同行”字节豆包AIoT开源生态沙龙圆满成功,正式推出基于豆包的 OpenEmbodied AI技术、产品及开源方案的落地与应用,致力于降低AIoT开发门槛,推动具身智能在设备端的广泛应用。
开源AIoT核心能力矩阵
机智云宣布全面开源其AIoT开发的核心组件,覆盖硬件、固件、应用框架与示例代码全链条。此次开源的核心目标是赋能开发者“跳过技术壁垒”,快速为IoT硬件注入AI能力。
开源核心内容
AI小程序框架:提供设备端构建AI交互应用的基础框架。
AIGagent固件:实现AI智能体在资源受限的嵌入式设备(如ESP32系列)上高效运行的关键固件。
AI开发板资料:丰富的硬件参考设计、代码,支持快速硬件原型搭建。
“小智”项目示例:完整开源的端到端AI语音聊天机器人参考实现。包含语音唤醒、流式对话、多语言识别、大模型集成、TTS、物联网控制等核心功能代码。
【代码仓库见文末链接】
可量产方案:机智云AIoT + Coze 协同开发
项目提供了一套成熟可立即投入商用的开发方案,核心是机智云AIoT平台与Coze平台的深度协同。
唤醒与打断:BOOT键(点击/长按),离线语音唤醒 (ESP-SR)。
语音交互:流式对话(WebSocket),支持国语、粤语、英语、日语、韩语等多语言识别。
大模型集成:LLM (Qwen, DeepSeek, Doubao等),大模型TTS。
智能体能力:可配置提示词与音色(自定义角色),短期记忆与对话总结。
显示交互:支持OLED/LCD显示信号、对话内容、图片表情;支持多语言显示(中/英)。
多模态:支持摄像头接入。
连接:Wi-Fi / ML307 Cat.1 4G。
广泛硬件兼容:核心支持ESP32系列主流芯片平台
ESP32-S3
ESP32-C3
ESP32-P4
ESP32-C2
二次开发便利:开发者可在机智云平台便捷完成AI设备的二次开发与功能部署。
智能体端(Coze平台):
灵活智能体编排:开发者可在Coze平台上,利用其强大的工作流和插件能力,轻松定制和编排专业化的AI智能体,定义其知识、技能与交互逻辑。
无缝对接设备:定制好的智能体可高效部署到运行机智云AIGagent固件的设备上。
该方案优势:硬件功能完善、平台成熟度高、智能体定制灵活、支持多种连接方式,为开发者提供了一条快速通向可量产AIoT产品的路径。
文末查看可量产AI方案详细开发指南
自定义开发板指南
手把手教你如何为AI语音机器人项目适配新的ESP32系列开发板。
支持超过50种ESP32开发板变种,每种板型都有独立的初始化代码目录。
文末查看自定义开发板指南
物联网控制模块指南
深入解析OpenEmbodied技术中实现设备控制的核心模块。
实现了AI语音聊天机器人的物联网控制功能,使用户可以通过语音指令控制接入到ESP32开发板的各种物联网设备。
文末查看物联网控制模块指南
立即获取资源,迈向开发新机遇
开源项目的所有代码、文档、硬件资料和示例均已开源,开发者可通过以下渠道获取:
GitHub的链接:
https://github.com/gizwits/OpenEmbodied

GitCode的链接:
https://gitcode.com/org/GizwitsIoT/repos

全部0条评论
快来发表一下你的评论吧 !