基于RISC-V芯片Bianbu Robot机器人解决方案

描述

AI机器人作为新质生产力的代表,正在蓬勃高速发展。进迭时空基于RISC-V AI CPU K1芯片推出Bianbu Robot机器人解决方案,服务AI机器人等新质生产力的发展。
 


 

K1芯片采用CPU与AI同构融合架构,提供2Tops大模型算力,既能高效运行传统CNN模型,又能支持大模型推理。同时,K1芯片集成了一颗小核协处理器,该协处理器可独立运行 RTOS系统,专责管理芯片上的各路电源开关。在实际产品应用中,AI CPU与协处理器各司其职、高效协同,保障系统实现高效、低功耗且稳定的运行。


 


 

机器人核心应用场景


 

随着大模型的快速发展,AI机器人市场也在快速兴起。K1芯片从底层计算架构出发,为AI机器人多样化功能提供完整解决方案,兼容本地大模型与云端大模型计算,形成云端一体协同方案:


 

进迭时空


 

Bianbu Robot机器人整体解决方案,在夯实系统底层能力的基础上,集成了多项功能模块,全面支撑AI机器人产品的快速开发与规模化应用。


 


 

方案介绍


 

Bianbu Robot机器人解决方案搭载K1芯片,有效支持语音识别、视觉感知等关键任务处理。方案集成大语言模型能力,实现自然语言交互与多任务智能编排,广泛适配无人机、清洁机器人、四足机器人、机械臂、AI智能玩具等多类型智能终端的落地应用。


 

技术方案架构


 


 

进迭时空

系统方面,Bianbu Robot方案基于Bianbu ROS机器人操作系统,面向AI机器人领域提供完整系统参考。Bianbu ROS以进迭时空自研操作系统Bianbu OS为内核底座,以ROS2为运行核心,集成深度优化的机器人中间件和SDK,涵盖多媒体中间件JDK、高性能计算库HPC Libs和开发套件BRDK。


 


 

BRDK(Bianbu ROS Dev Kit)


 

BRDK基于ROS2系统进行深度抽象与模块化封装,面向AI机器人产品开发高度贴合实际应用的开源参考方案。其核心特性包括:


 

集成AI开发工具链


 

内置量化工具链、基础预训练模型库(Model Zoo)及示例代码,支持主流模型格式与部署流程,实现开箱即用的开发体验。


 

适配主流开源大模型


 

原生支持DeepSeek、Qwen、Hugging Face Smol*系列等主流开源大模型,集成大模型编排框架 LocalAI,前端调用接口完全兼容 OpenAI API,便于快速对接现有应用生态。


 

完整语音处理解决方案


 

提供产品级ASR(语音识别)与TTS(语音合成)模型库,配套多麦克风阵列前处理、声源定位SDK、语音降噪与回声消除模块,覆盖从感知到交互的全链路语音处理。


 

开源ROS2服务组件


 

提供丰富的开源ROS2功能包,包括视觉感知、语音交互、传感器接入、具身机械控制、定位导航与LLM任务编排等服务,支持模块化集成与定制化开发。


 

参考应用Pipeline全链路示例


 

提供涵盖数据采集、处理、建模与交互的端到端参考流程,助力开发者快速构建完整的机器人应用系统。


 


 

JDK(Jobot Dev Kits)


 

JDK基于基础操作系统,对数据通路进行了高度封装,旨在实现功能模块化与代码高效复用,使开发者专注于构建高层Pipeline,而无需关心底层数据调度与系统细节。其主要特性包括:


 

IO HUB数据枢纽


 

兼容多种协议的相机设备,支持数据零拷贝传输,极致压缩系统带宽,显著降低功耗开销。


 

软硬结合的Pipeline加速


 

Pipeline流程充分调度芯片内置硬件加速单元,支持图像缩放、旋转、裁剪、混合(blending)等高性能图像处理操作。


 

功能模块化编程模型


 

全流程支持模块化“搭积木式”编程,涵盖数据采集、编码压缩、模型推理、图像打水印、视频显示与多路重推流等功能模块,便于灵活组合与快速开发。


 

低延迟直显机制


 

提供灵活的视频直显策略,优化帧缓冲路径,显著压缩视频通路延迟,满足高实时性应用需求。


 

OpenCL加速库支持


 

集成丰富的图像增强与稳定算法库,包含畸变矫正、电子防抖(EIS)等功能,通过AI CPU加速实现高效图像处理。


 


 

HPC Libs(High Performance Libraries)


 

高性能计算能力在机器人感知与控制任务中至关重要。Bianbu Robot提供优化深度的高性能计算引擎,最大化发挥K1芯片硬件潜力,助力智能系统实现低延迟、高吞吐的推理与计算性能。主要特性包括:


 

基础计算库


 

集成多种主流基础计算库,包括机器视觉库OpenCV,基础数学库OpenVML,线性计算库Eigen/OpenBLAS等,基于RISC-V平台做了向量化优化和深度调优,充分发挥256-bit RISC-V Vector Extension(RVV)性能。


 

AI算子库


 

基于遵循IME(Intelligent Matrix Engine)标准的自定义AI指令,构建元算子级别的AI算子库。通过调用标准算子API,即可获得澎湃的AI算力。


 

AI推理加速后端


 

深度适配RISC-V平台,进行了算子融合,多线程调度,内存优化,SARM动态切分等深度优化,无缝接入ONNXRuntime,Llama.cpp等主流推理生态。


 

高性能计算语言


 

基于OpenAI Triton深度适配RISC-V后端,可使用Python编写出接近硬件峰值性能的高效算子。支持将主流CUDA推理任务快速迁移至RISC-V平台,显著降低适配成本,加速落地应用。


 


 


 

方案特点


 

Bianbu Robot机器人解决方案专注于语音算法、AI视觉与大模型应用,提供开箱即用的模块化服务,紧密结合芯片性能,助力客户加速方案落地。SDK源码开放,支持开发者自由创新。


 

支持丰富的 Model Zoo 

涵盖大模型应用、语音处理及传统视觉AI模型。


 

大模型应用 

兼容Qwen2系列、DeepSeek-1.5b、SomlLM2、SomlVLM、SomlVLA系列,支持大模型语音对话,端到端语音对话延时低于 1.5 秒。


 

语音处理 

涵盖VAD、ASR、TTS、DOA、NS及多麦克风声源定位。


 

传统 AI 视觉 

提供目标检测、分类、追踪等深度优化基础模型,满足1000+应用场景需求。


 

定位与建图 

支持激光导航、单目视觉VSLAM、双目里程计方案。


 

支持 Linux PreemptRT 

兼容工业控制协议EtherCAT、CAN、RS485/232,满足实时控制需求。


 

低延时视频通路

支持最高1080P@120FPS编码,满足无人机低延时视频需求。


 

完善配套工具链 

包括优化的GCC/Clang编译器、量化工具及大模型微调工具。

 


 

方案优势


 

当前AI机器人多依赖联网,隐私保护成为关键挑战。进迭时空的云端协同方案有效解决了大模型落地的核心难题:


 

开发灵活性

Linux SDK系统源码全面开放,配备丰富调试工具,便于客户扩展应用与自定义算法开发。


 

成本优势 

K1端侧承担基础AI推理任务,降低对云端算力服务器的依赖,减少系统整体运营成本。


 

性能平衡 

结合端侧轻量推理与云端高算力计算,既保障本地大模型智能升级,又避免纯云端方案带来的高延迟,实现产品随时在线智能响应。


 

隐私增强 

通过本地算力就地处理隐私敏感任务(如语音转文字ASR),符合多国隐私保护法规要求,解决大模型应用的合规难题。


 

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分