AI機器人作為新質生產力的代表,正在蓬勃高速發展。進迭時空基于RISC-V AI CPU K1芯片推出Bianbu Robot機器人解決方案,服務AI機器人等新質生產力的發展。
K1芯片采用CPU與AI同構融合架構,提供2Tops大模型算力,既能高效運行傳統CNN模型,又能支持大模型推理。同時,K1芯片集成了一顆小核協處理器,該協處理器可獨立運行 RTOS系統,專責管理芯片上的各路電源開關。在實際產品應用中,AI CPU與協處理器各司其職、高效協同,保障系統實現高效、低功耗且穩定的運行。
機器人核心應用場景
隨著大模型的快速發展,AI機器人市場也在快速興起。K1芯片從底層計算架構出發,為AI機器人多樣化功能提供完整解決方案,兼容本地大模型與云端大模型計算,形成云端一體協同方案:
Bianbu Robot機器人整體解決方案,在夯實系統底層能力的基礎上,集成了多項功能模塊,全面支撐AI機器人產品的快速開發與規模化應用。
方案介紹
Bianbu Robot機器人解決方案搭載K1芯片,有效支持語音識別、視覺感知等關鍵任務處理。方案集成大語言模型能力,實現自然語言交互與多任務智能編排,廣泛適配無人機、清潔機器人、四足機器人、機械臂、AI智能玩具等多類型智能終端的落地應用。
技術方案架構
系統方面,Bianbu Robot方案基于Bianbu ROS機器人操作系統,面向AI機器人領域提供完整系統參考。Bianbu ROS以進迭時空自研操作系統Bianbu OS為內核底座,以ROS2為運行核心,集成深度優化的機器人中間件和SDK,涵蓋多媒體中間件JDK、高性能計算庫HPC Libs和開發套件BRDK。
BRDK(Bianbu ROS Dev Kit)
BRDK基于ROS2系統進行深度抽象與模塊化封裝,面向AI機器人產品開發高度貼合實際應用的開源參考方案。其核心特性包括:
集成AI開發工具鏈
內置量化工具鏈、基礎預訓練模型庫(Model Zoo)及示例代碼,支持主流模型格式與部署流程,實現開箱即用的開發體驗。
適配主流開源大模型
原生支持DeepSeek、Qwen、Hugging Face Smol*系列等主流開源大模型,集成大模型編排框架 LocalAI,前端調用接口完全兼容 OpenAI API,便于快速對接現有應用生態。
完整語音處理解決方案
提供產品級ASR(語音識別)與TTS(語音合成)模型庫,配套多麥克風陣列前處理、聲源定位SDK、語音降噪與回聲消除模塊,覆蓋從感知到交互的全鏈路語音處理。
開源ROS2服務組件
提供豐富的開源ROS2功能包,包括視覺感知、語音交互、傳感器接入、具身機械控制、定位導航與LLM任務編排等服務,支持模塊化集成與定制化開發。
參考應用Pipeline全鏈路示例
提供涵蓋數據采集、處理、建模與交互的端到端參考流程,助力開發者快速構建完整的機器人應用系統。
JDK(Jobot Dev Kits)
JDK基于基礎操作系統,對數據通路進行了高度封裝,旨在實現功能模塊化與代碼高效復用,使開發者專注于構建高層Pipeline,而無需關心底層數據調度與系統細節。其主要特性包括:
IO HUB數據樞紐
兼容多種協議的相機設備,支持數據零拷貝傳輸,極致壓縮系統帶寬,顯著降低功耗開銷。
軟硬結合的Pipeline加速
Pipeline流程充分調度芯片內置硬件加速單元,支持圖像縮放、旋轉、裁剪、混合(blending)等高性能圖像處理操作。
功能模塊化編程模型
全流程支持模塊化“搭積木式”編程,涵蓋數據采集、編碼壓縮、模型推理、圖像打水印、視頻顯示與多路重推流等功能模塊,便于靈活組合與快速開發。
低延遲直顯機制
提供靈活的視頻直顯策略,優化幀緩沖路徑,顯著壓縮視頻通路延遲,滿足高實時性應用需求。
OpenCL加速庫支持
集成豐富的圖像增強與穩定算法庫,包含畸變矯正、電子防抖(EIS)等功能,通過AI CPU加速實現高效圖像處理。
HPC Libs(High Performance Libraries)
高性能計算能力在機器人感知與控制任務中至關重要。Bianbu Robot提供優化深度的高性能計算引擎,最大化發揮K1芯片硬件潛力,助力智能系統實現低延遲、高吞吐的推理與計算性能。主要特性包括:
基礎計算庫
集成多種主流基礎計算庫,包括機器視覺庫OpenCV,基礎數學庫OpenVML,線性計算庫Eigen/OpenBLAS等,基于RISC-V平臺做了向量化優化和深度調優,充分發揮256-bit RISC-V Vector Extension(RVV)性能。
AI算子庫
基于遵循IME(Intelligent Matrix Engine)標準的自定義AI指令,構建元算子級別的AI算子庫。通過調用標準算子API,即可獲得澎湃的AI算力。
AI推理加速后端
深度適配RISC-V平臺,進行了算子融合,多線程調度,內存優化,SARM動態切分等深度優化,無縫接入ONNXRuntime,Llama.cpp等主流推理生態。
高性能計算語言
基于OpenAI Triton深度適配RISC-V后端,可使用Python編寫出接近硬件峰值性能的高效算子。支持將主流CUDA推理任務快速遷移至RISC-V平臺,顯著降低適配成本,加速落地應用。
方案特點
Bianbu Robot機器人解決方案專注于語音算法、AI視覺與大模型應用,提供開箱即用的模塊化服務,緊密結合芯片性能,助力客戶加速方案落地。SDK源碼開放,支持開發者自由創新。
支持豐富的 Model Zoo
涵蓋大模型應用、語音處理及傳統視覺AI模型。
大模型應用
兼容Qwen2系列、DeepSeek-1.5b、SomlLM2、SomlVLM、SomlVLA系列,支持大模型語音對話,端到端語音對話延時低于 1.5 秒。
語音處理
涵蓋VAD、ASR、TTS、DOA、NS及多麥克風聲源定位。
傳統 AI 視覺
提供目標檢測、分類、追蹤等深度優化基礎模型,滿足1000+應用場景需求。
定位與建圖
支持激光導航、單目視覺VSLAM、雙目里程計方案。
支持 Linux PreemptRT
兼容工業控制協議EtherCAT、CAN、RS485/232,滿足實時控制需求。
低延時視頻通路
支持最高1080P@120FPS編碼,滿足無人機低延時視頻需求。
完善配套工具鏈
包括優化的GCC/Clang編譯器、量化工具及大模型微調工具。
方案優勢
當前AI機器人多依賴聯網,隱私保護成為關鍵挑戰。進迭時空的云端協同方案有效解決了大模型落地的核心難題:
開發靈活性
Linux SDK系統源碼全面開放,配備豐富調試工具,便于客戶擴展應用與自定義算法開發。
成本優勢
K1端側承擔基礎AI推理任務,降低對云端算力服務器的依賴,減少系統整體運營成本。
性能平衡
結合端側輕量推理與云端高算力計算,既保障本地大模型智能升級,又避免純云端方案帶來的高延遲,實現產品隨時在線智能響應。
隱私增強
通過本地算力就地處理隱私敏感任務(如語音轉文字ASR),符合多國隱私保護法規要求,解決大模型應用的合規難題。
-
芯片
+關注
關注
459文章
52481瀏覽量
440558 -
機器人
+關注
關注
213文章
29726瀏覽量
212792 -
RISC-V
+關注
關注
46文章
2562瀏覽量
48778 -
進迭時空
+關注
關注
0文章
31瀏覽量
132
發布評論請先 登錄
risc-v多核芯片在AI方面的應用
RISC-V在AI領域的發展前景怎么樣?
risc-v芯片在電機領域的應用展望
香蕉派 BPI-CM6 工業級核心板采用進迭時空K1 8核 RISC-V 芯片開發
大象機器人攜手進迭時空推出 RISC-V 全棧開源六軸機械臂產品
《電子發燒友電子設計周報》聚焦硬科技領域核心價值 第19期:2025.07.7--2025.07.11
智能掃地機器人解決方案
為什么選擇RISC-V?
基于RISC-V開放架構的存算一體化芯片解決方案

基于RISC-V內核的嵌入式系統在機器人關節控制中的應用研究
大象機器人×進迭時空聯合發布全球首款RISC-V全棧開源小六軸機械臂

大象機器人攜手進迭時空推出 RISC-V 全棧開源六軸機械臂產品

評論