开源智联·具身同行:机智云推出基于豆包的 OpenEmbodied AI技术、产品及开源方案

描述

 

6月11日机智云携手火山引擎、扣子发起,联合CSDN、GitCode、广和通、奕斯伟、爱湾学院举办的“开源智联·具身同行”字节豆包AIoT开源生态沙龙圆满成功,正式推出基于豆包的 OpenEmbodied AI技术、产品及开源方案的落地与应用,致力于降低AIoT开发门槛,推动具身智能在设备端的广泛应用。

 


 开源AIoT核心能力矩阵

 


 

机智云宣布全面开源其AIoT开发的核心组件,覆盖硬件、固件、应用框架与示例代码全链条。此次开源的核心目标是赋能开发者“跳过技术壁垒”,快速为IoT硬件注入AI能力。





开源核心内容


 


 

AI小程序框架:提供设备端构建AI交互应用的基础框架。

AIGagent固件:实现AI智能体在资源受限的嵌入式设备(如ESP32系列)上高效运行的关键固件。

AI开发板资料:丰富的硬件参考设计、代码,支持快速硬件原型搭建。

“小智”项目示例:完整开源的端到端AI语音聊天机器人参考实现。包含语音唤醒、流式对话、多语言识别、大模型集成、TTS、物联网控制等核心功能代码。


 

【代码仓库见文末链接】


 


 可量产方案:机智云AIoT + Coze 协同开发

 


 

项目提供了一套成熟可立即投入商用的开发方案,核心是机智云AIoT平台与Coze平台的深度协同。


 





 


 

唤醒与打断:BOOT键(点击/长按),离线语音唤醒 (ESP-SR)。

语音交互:流式对话(WebSocket),支持国语、粤语、英语、日语、韩语等多语言识别。

大模型集成:LLM (Qwen, DeepSeek, Doubao等),大模型TTS。

智能体能力:可配置提示词与音色(自定义角色),短期记忆与对话总结。

显示交互:支持OLED/LCD显示信号、对话内容、图片表情;支持多语言显示(中/英)。

多模态:支持摄像头接入。

连接:Wi-Fi / ML307 Cat.1 4G。


 

广泛硬件兼容:核心支持ESP32系列主流芯片平台

ESP32-S3

ESP32-C3

ESP32-P4

ESP32-C2


 

二次开发便利:开发者可在机智云平台便捷完成AI设备的二次开发与功能部署。


 

智能体端(Coze平台):


 

灵活智能体编排:开发者可在Coze平台上,利用其强大的工作流和插件能力,轻松定制和编排专业化的AI智能体,定义其知识、技能与交互逻辑。


 

无缝对接设备:定制好的智能体可高效部署到运行机智云AIGagent固件的设备上。


 

该方案优势:硬件功能完善、平台成熟度高、智能体定制灵活、支持多种连接方式,为开发者提供了一条快速通向可量产AIoT产品的路径。


 

文末查看可量产AI方案详细开发指南


 


自定义开发板指南

 


 

手把手教你如何为AI语音机器人项目适配新的ESP32系列开发板。


 

支持超过50种ESP32开发板变种,每种板型都有独立的初始化代码目录。


 

文末查看自定义开发板指南


 


物联网控制模块指南

 


 

深入解析OpenEmbodied技术中实现设备控制的核心模块。

实现了AI语音聊天机器人的物联网控制功能,使用户可以通过语音指令控制接入到ESP32开发板的各种物联网设备。


 

文末查看物联网控制模块指南


 


立即获取资源,迈向开发新机遇

 


 

开源项目的所有代码、文档、硬件资料和示例均已开源,开发者可通过以下渠道获取:


 

GitHub的链接:

https://github.com/gizwits/OpenEmbodied


 


开源


 


 

GitCode的链接:

https://gitcode.com/org/GizwitsIoT/repos


 


开源


 


 

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分