樂鑫信息科技 (688018.SH) 推出 ESP-Brookesia ——一款專為物聯(lián)網(wǎng)設(shè)備打造、集成 AI 交互能力的 UI 開發(fā)與管理框架。

ESP-Brookesia 深度融合 AI 大模型技術(shù)，為智能屏顯應(yīng)用賦予語音識別、自然語言對話、擬人化反饋等能力，幫助開發(fā)者構(gòu)建更智能、更具溫度的人機(jī)交互體驗(yàn)。

在此基礎(chǔ)上，ESP-Brookesia 構(gòu)建于 ESP-IDF 和 LVGL 之上，支持從小尺寸圓屏到復(fù)雜大屏的 UI 開發(fā)，極大簡化跨屏適配與 UI 管理流程，讓開發(fā)者聚焦于應(yīng)用本身的功能實(shí)現(xiàn)。

無論是智能家居中控屏、帶屏音箱、小家電控制終端，還是車載語音助手與工業(yè)控制設(shè)備，ESP-Brookesia 都能提供統(tǒng)一、高效、可擴(kuò)展的 UI + AI 解決方案。

AI 深度賦能的 UI 系統(tǒng)

ESP-Brookesia 在傳統(tǒng)觸控交互的基礎(chǔ)上，內(nèi)嵌小智、豆包等 AI 智能體，不僅支持自然對話和語音控制，還能提供全局 AI 能力，無論是語音總結(jié)、智能規(guī)劃，還是智能輸入、實(shí)時(shí)翻譯，ESP-Brookesia 都能提供流暢的交互體驗(yàn)，使設(shè)備具備更強(qiáng)的自主理解與交互能力。

為滿足單屏與雙屏 AI 設(shè)備的交互需求，ESP-Brookesia 提供了完整的動(dòng)態(tài) AI 表情系統(tǒng)，可根據(jù)語義變化實(shí)時(shí)切換表情，模擬情緒反饋；同時(shí)，它支持結(jié)合用戶的交互習(xí)慣進(jìn)行個(gè)性化調(diào)整，為用戶提供更具溫度的互動(dòng)體驗(yàn)。

多模態(tài)交互，提升設(shè)備感知與表達(dá)

ESP-Brookesia 提供一套標(biāo)準(zhǔn)化 UI 組件與交互邏輯（如狀態(tài)欄、導(dǎo)航欄、任務(wù)后臺等），幫助開發(fā)者快速構(gòu)建應(yīng)用界面。同時(shí)，系統(tǒng)可結(jié)合大模型理解用戶使用習(xí)慣，動(dòng)態(tài)調(diào)整界面布局、推薦交互方式，實(shí)現(xiàn)智能 UI 適配。

通過樣式表機(jī)制，開發(fā)者可靈活定義 UI 風(fēng)格、顏色、字體等，并在多種分辨率和屏幕尺寸下實(shí)現(xiàn)一致運(yùn)行。此外，開發(fā)者還能借助 AI 工具輔助優(yōu)化界面設(shè)計(jì)，提升整體視覺體驗(yàn)。

場景豐富，適配多種 AIoT 應(yīng)用

通過 AI 大模型的深度融合，ESP-Brookesia 的應(yīng)用管理機(jī)制不僅提供了強(qiáng)大的動(dòng)態(tài)擴(kuò)展能力，還能智能適配用戶需求，降低開發(fā)門檻，讓 UI 應(yīng)用更加個(gè)性化、自動(dòng)化，為開發(fā)者和用戶帶來全新的智能體驗(yàn)。

平臺已提供多款預(yù)置應(yīng)用（如設(shè)置、天氣、音樂播放器、攝像頭、App Store 等），支持直接使用或定制開發(fā)。值得一提的是，AI 能參與 UI 應(yīng)用的智能推薦、內(nèi)容生成與操作邏輯優(yōu)化：

Setting：AI 推薦常用設(shè)置，簡化操作路徑

Music Player：根據(jù)用戶習(xí)慣生成播放列表

Weather：由大模型生成趨勢預(yù)測與生活建議

Camera：集成智能美顏與圖像識別功能

配合樂鑫芯片的 Wi-Fi 能力，ESP-Brookesia 支持通過 App Store 實(shí)現(xiàn)遠(yuǎn)程下載、動(dòng)態(tài)部署，搭配樂鑫 elf_loader 組件，支持 C/C++ 應(yīng)用的動(dòng)態(tài)加載與卸載，在有限的存儲空間中實(shí)現(xiàn)高效管理與彈性部署。

架構(gòu)靈活，支持混合編程開發(fā)

ESP-Brookesia 基于“驅(qū)動(dòng)–服務(wù)–應(yīng)用”架構(gòu)，采用模塊化設(shè)計(jì)，將 AI 引擎、UI 框架、資源管理與 App 應(yīng)用各自分離，既保證系統(tǒng)內(nèi)部高度協(xié)同，又方便各模塊獨(dú)立迭代升級。核心框架基于 C/C++ 開發(fā)，并原生支持 ESP-IDF、MicroPython 等開發(fā)體系，充分利用樂鑫開源組件生態(tài)。

同時(shí)，為提升開發(fā)靈活性，ESP-Brookesia 支持 JavaScript、LUA、Python 等腳本語言的混合編程。AI 工具可輔助生成或轉(zhuǎn)換代碼片段，適配嵌入式性能需求：

利用 Python 快速原型設(shè)計(jì)，AI 自動(dòng)轉(zhuǎn)換為 C/C++ 高效實(shí)現(xiàn)；

支持 AI 基于自然語言描述自動(dòng)生成 UI 組件代碼，極大加速開發(fā)流程。

開發(fā)者可專注于業(yè)務(wù)邏輯，交由 AI 提升代碼質(zhì)量與開發(fā)效率，實(shí)現(xiàn)更高效、更智能的 UI 交互體驗(yàn)。

快速集成，立即上手

ESP-Brookesia 不只是一個(gè) UI 框架，它更是一套面向 AIoT 交互設(shè)備的 SDK。它將本地智能、圖形渲染與多協(xié)議通信有機(jī)結(jié)合，讓設(shè)備能真正“聽得懂用戶的話，做出自然的反饋”。

未來，我們將持續(xù)優(yōu)化 ESP-Brookesia 的功能，相關(guān)的代碼工程將會(huì)陸續(xù)開源，歡迎大家點(diǎn)擊下方閱讀原文了解詳細(xì)內(nèi)容，并與我們一起探索更多可能！