7 月 17 日,涂鴉 OmniAI Foundation正式升級至 2.2 版本!本次迭代的核心亮點,在于我們對 AI 智能體技能進行了全面升級,顯著提升了系統在內容理解、多技能協同以及泛化溝通方面的能力,讓 AI 助手能夠更自然、更精準地理解并響應用戶意圖。同時,我們聯合阿里云帶來了涂鴉私有版Qwen 模型,為用戶打造更快的 AI 對話響應時間,為各業務場景提供更加強大、靈活、貼近需求的 AI 能力支持,并實現以下幾方面的重大突破:
端到端響應速度提升 40%,弱網環境下語音延遲降低 50%
動態記憶架構,破解 AI 長期交互中的性能衰退
精準識別語音起止點,最快可達到 350ms 的極限打斷速度
升級 AES 自適應專家系統,顯著抑制大模型幻覺(即 AI 有時會一本正經地胡說八道)
什么是 OmniAI Foundation?
OmniAI Foundation 是致力于提供穩定、智能、開放的 AI Agent 能力基座平臺,通過涂鴉持續的技術創新和功能升級,為各業務場景帶來更強大的 AI 體驗。
一、更卓越的 AI 對話體驗
1、全面提升全球弱網對抗能力
涂鴉全新優化了通信傳輸協議,顯著提升網絡環境不佳時的 AI 響應速度。即使在 2G 網絡環境下,語音識別和響應的延遲也大幅降低,確保用戶在各種網絡條件下均能享受到流暢的對話體驗。依托涂鴉全球 7 大數據中心、100+ 網絡加速節點,在全球主流城市能達到網絡延時 <68ms(中位數),弱網對抗能力快速提升 50%。
2、全面升級個體記憶能力
基于涂鴉精心打造的 AI 記憶架構,OmniAI Foundation 實現了更精準的用戶特征提取與動態記憶管理。它采用分層記憶模型,結合抗衰減機制與情境關聯檢索,能通過權重分類器自動降權沖突數據,高效保留用戶的關鍵信息(如用戶提問偏好類型、歷史交互細節);同時智能過濾冗余內容,最終輕松將記憶提取的響應速度提高 40%,有效抑制長期交互中的性能衰退。當用戶信息更新或提問存在沖突時(如偏好變更、前后矛盾),系統會自動標記舊記憶的有效性,并優先激活最新信息,避免重復詢問或回答矛盾。確保在多輪跨會話對話中,每一次交互都更貼合用戶的當下需求。
(涂鴉 AI 記憶架構圖)
3、更優雅的打斷體驗
相比同行,涂鴉擁有更好的 AI 斷句能力。在優化版本前,我們拜訪了大量的真實用戶,并結合真正的用戶使用場景,沉淀大量測試信息進行一一驗證,最終成功開發出更貼合用戶真實習慣的優雅打斷策略(即低延遲動態打斷)。這一決策,并非過度追求無意義的極限數據,而是為了在確保整體響應速度有競爭力的前提下,能擁有最優的打斷效果。
因此,OmniAI Foundation引入了基于深度學習的語音活動檢測(VAD)算法,能夠更實時精準地識別用戶說話的開始和結束,減少無效等待時間,同時大幅降低誤觸率,提升交互的自然度和流暢性。在實際對話中,涂鴉最快可支持 350ms 的極限打斷速度,但一般情況下,我們會更推薦用戶默認使用優雅打斷。因為優雅打斷在速度和連貫度之間擁有更恰到好處的平衡,能顯著降低誤切分和錯聽的概率,整體交互效率更高。
基于用戶真實情況調研,我們設計了眾多貼合真實場景的測試用例,下面分享其中一個。也歡迎大家拿出手上的設備,驗證是否會被打斷、以及打斷幾次:
【注】不同的硬件結構和方案會對收音產生影響,我們同步也提供分貝數據的參考。
4、 阿里云+涂鴉私有版 AI 模型
涂鴉聯合阿里云重磅推出了私有版 Qwen 模型,提供了一整套密集型和混合專家型(MoE)模型,支持按對話場景,靈活地調度計算資源。基于廣泛的訓練,在邏輯推理、指令遵循、代理能力及多語言支持方面,實現了突破性的進展,可為用戶提供更加實時的秒級端到端響應體驗。
5、同步推出 AES 2.2 版本
基于涂鴉 AES(Adaptive Expert System)自適應專家系統,可有效降低大模型幻覺,幫助提升技能執行成功率和響應時間。本次更新,溝通話術的泛化能力大幅提升,能夠更智能地應對各種使用場景;針對基礎技能模塊,涂鴉也進行了大幅優化與各項能力的新增,功能更加全面。
基于 AES 2.2 版本,我們全面提升了各領域技能體驗。
5.1 音樂/內容技能
試聽版:支持試聽數百首音樂/兒歌和完整版本的童話故事,可滿足用戶在內容試播、演示以及快速產品化的即時需求;
版權版:國內現已支持網易云音樂,如果大家也想接入,可聯系與您對接的涂鴉商務BD。
【注】如目前沒有對接的 BD,可點擊文末“閱讀原文”,填寫表單后,將會給大家分配。
5.2 智能家居技能
基于 AES 2.2 系統,我們分別對不同設備規模的家庭場景(目前支持 5-40 個)進行了數十個品類的測試,本次發布重在提升設備準確率和降低響應時間。由于設備品類和應用場景眾多,我們將持續升級該領域能力。
5.3 AI 產品指令技能
如果你希望控制其它第三方設備,無需了解第三方設備的具體功能實現,只要直接開啟智能家居技能即可。
如果你僅需控制該產品本身,為了可以最大化發揮產品的 AI 能力,涂鴉為大家提供了便捷的“AI 產品指令”,你僅需在平臺上配置產品支持的功能即可。
比如:你的產品是只機器狗,你設置前進、后退、舞蹈等動作,以及音量、開關等基礎功能,即可實現 AI 語音控制。
5.4 更泛化的實時查詢技能
5.4.1 天氣查詢
支持查詢國內外城市的實時天氣、預報信息,適用于規劃出行。
5.4.2 日歷查詢
不僅可以查詢具體日期信息,更能獲取國內節假日安排。
5.4.3 實時聯網查詢
涂鴉可一站式滿足用戶的多樣化信息需求,現已支持:
動態獲取新聞資訊
實時查看股票行情
查詢本地生活服務(如餐飲、交通)
規劃與查詢地圖導航
用戶自定義相關內容的精準搜索能力
5.5 更便捷的個性化角色設定
涂鴉賦能 App 可根據用戶的需要靈活設定角色屬性(如傲嬌霸總、味覺探險家等),并提供多達數十種可選的音色(音色種類還在持續拓展中~)。如沒有你喜歡的音色,也可以上傳 10 秒鐘音頻,快速克隆一個新音色。該功能有效豐富了消費者對差異化角色的自定義和泛化玩法,提供更自然流暢、更具人情味的交流對話,提升整體交互溫度。
戳視頻,手把手教你配置個性化角色:
-
AI
+關注
關注
88文章
35194瀏覽量
280269 -
涂鴉智能
+關注
關注
7文章
264瀏覽量
20048
發布評論請先 登錄
涂鴉智能重磅發布四大AIoT技術引擎,賦能開發者以AI重構物理世界

首創開源架構,天璣AI開發套件讓端側AI模型接入得心應手
硅基覺醒已至前夜,聯發科攜手生態加速智能體化用戶體驗時代到來
達實AIoT智能物聯網管控平臺V7版本發布
《零基礎開發AI Agent——手把手教你用扣子做智能體》
涂鴉AI玩具2.0解決方案發布!連續對話×聲音克隆,打造更懂孩子的智慧伙伴

時隔7年的大版本更新,HDMI 2.2有哪些變化?

HDMI Forum發布HDMI規范2.2版本
涂鴉賦能App 6.0版本解鎖全新智能生活!單品、場景、車家互聯全線升級

評論