女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Kinara發布Ara-2邊緣AI處理器,實現高效、經濟、節能的推理性能

微云疏影 ? 來源:綜合整理 ? 作者:綜合整理 ? 2023-12-19 11:05 ? 次閱讀

Kinar于近期發布了Ara-2邊緣AI處理器,這是一款專為邊緣服務器及筆記本電腦打造的高性能、高效能且節能推理解決方案,尤其適用于視頻分析、大規模語言模型(LLM)在內的各類AI應用。值得注意的是,Ara-2也能夠良好適應傳統AI模型和基于Transformer架構的尖端AI模型,其所具備的體驗式增強功能集使得Ara-2的性能較初代的Ara-1處理器有顯著提升,可達成超過5至8倍的增長,將實時響應能力與大吞吐量相結合,從而達致高度精煉的延遲優化設計和均衡性能。

生成式AI現已成為主流,然而大多數此類應用卻在數據中心GPU上運行,由此引發的延遲、高成本以及隱私問題亟待解決。Ara-2順應時代變化,貼心支持生成式AI模型所需引導的數十億個參數,為跨境轉移提供便利。同時,為了更順暢地完成從GPU至各個AI模型的過度,其內建的計算引擎以及軟件開發套件(SDK)均為此進行定制搭建。

“Ara-2的誕生使得我們有能力根據客戶需求提供更高性能和成本選擇。如Ara-1,其專為智能相機及具有2至8路視頻流的邊緣AI設備而生;而Ara-2則特別擅長處理針對16至32路甚至更多視頻流的底層邊緣服務器或筆記本電腦,且與高端相機完美兼容?!?Kinara首席執行官Ravi Annavajjhala對此表示?!敖柚冗M的計算引擎,Ara-2能夠快速處理高清圖像,有效提升精度,實現更高水平的對象檢視、識別及追蹤。例如,針對生成式AI模型,Stable Diffusion每10秒即可生成一幅圖片,LLaMA-7B則可達到每秒幾十個token的處理速率?!?/p>

據悉,Ampere將在10月份容忍Kinar加入其人工智能平臺聯盟,共同致力于降低系統復雜度,推動人工智能進一步提升協同工作能力和開放性,目標在于提供比GPU更優的總體性能,同時兼顧吞吐量、功率和成本效益。該團隊的首席布道師Sean Varley認為:“ ARA-2展現的性能和功能集讓我堅定朝這個方向發展,助力行業推出性能更優且與現有GPU技術相匹敵的AI替代方案?!?/p>

除此之外,Ara-2還秉持著安全啟動、加密內存訪問以及安全主控接口等特性,確保企業AI部署擁有更高的安全性。Kinar亦為之提供全套的SDK支持,囊括模型編譯器、計算單元調度程序、靈活的量化選項(含內置的Kinar量化器)以及對PyTorch和TFLite預量化模型的支持、多芯片負荷均衡器系統與動態調節主控運行等諸多要素。

Ara-2提供獨立設備、USB模塊、M.2模塊以及多個Ara-2組成的PCIe卡等豐富形式供消費者選擇。 Kinara計劃在CES上現場展示這款備受矚目的Ara-2產品。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4909

    瀏覽量

    130646
  • 數據中心
    +關注

    關注

    16

    文章

    5130

    瀏覽量

    73186
  • 生成式AI
    +關注

    關注

    0

    文章

    525

    瀏覽量

    704
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    意法半導體邊緣AI套件中提供的全部工具

    推理性能。 ? 典型應用 ?:工業設備故障預測、人臉識別等低延遲場景。 ? NanoEdge AI Studio ? ?
    的頭像 發表于 04-21 17:46 ?550次閱讀

    英偉達GTC25亮點:NVIDIA Dynamo開源庫加速并擴展AI推理模型

    NVIDIA Dynamo 提高了推理性能,同時降低了擴展測試時計算 (Scaling Test-Time Compute) 的成本;在 NVIDIA Blackwell 上的推理優化將
    的頭像 發表于 03-20 15:03 ?541次閱讀

    Banana Pi 發布 BPI-AI2N & BPI-AI2N Carrier,助力 AI 計算與嵌入式開發

    []() 2025年3月19日——Banana Pi 今日正式發布 BPI-AI2N & BPI-AI2N Carrier,基于瑞薩電子(Renesas)同步發布的最新的高
    發表于 03-19 17:54

    恩智浦擬收購邊緣AI企業Kinara

    恩智浦半導體宣布已達成最終協議收購Kinara, Inc.——高性能、低功耗且可編程的分立神經處理單元(NPU)行業的領先企業。該公司產品支持廣泛的邊緣
    的頭像 發表于 02-21 14:15 ?617次閱讀

    英特爾至強6助力HPE Gen12,AI推理性能提升3倍!

    在這個AI人工智能、HPC高性能計算飛速發展的時代,人們對于算力的渴望是空前的,無論是CPU處理器、GPU/NPU加速,尤其是生成式AI
    的頭像 發表于 02-18 14:18 ?267次閱讀
    英特爾至強6助力HPE Gen12,<b class='flag-5'>AI</b><b class='flag-5'>推理性能</b>提升3倍!

    Arm技術助力Google Axion處理器加速AI工作負載推理

    由 Arm Neoverse V2 平臺賦能的 Google Axion 處理器已在 Google Cloud 上正式上線,其中,C4A 是首款基于 Axion 的云虛擬機,為基于 CPU 的人工智能 (AI)
    的頭像 發表于 02-14 14:11 ?411次閱讀
    Arm技術助力Google Axion<b class='flag-5'>處理器</b>加速<b class='flag-5'>AI</b>工作負載<b class='flag-5'>推理</b>

    恩智浦3.07億美元收購Kinara,強化邊緣AI布局

    近日,恩智浦半導體公司(NXP Semiconductors)宣布了一項重大收購計劃,將以3.07億美元(約合22.44億元人民幣)現金收購邊緣AI NPU(神經處理單元)公司Kinara
    的頭像 發表于 02-12 17:02 ?626次閱讀

    恩智浦擬22.44億人民幣收購邊緣NPU企業Kinara

    近日,全球領先的半導體公司恩智浦半導體宣布,已與邊緣NPU(神經網絡處理器)企業Kinara達成最終收購協議。根據協議,恩智浦將以3.07億美元(當前約合22.44億元人民幣)現金收購Kina
    的頭像 發表于 02-12 10:31 ?418次閱讀

    使用NVIDIA推理平臺提高AI推理性能

    NVIDIA推理平臺提高了 AI 推理性能,為零售、電信等行業節省了數百萬美元。
    的頭像 發表于 02-08 09:59 ?615次閱讀
    使用NVIDIA<b class='flag-5'>推理</b>平臺提高<b class='flag-5'>AI</b><b class='flag-5'>推理性能</b>

    Ampere發布最新192核12內存通道AmpereOne M處理器

    Ampere 發布了旗艦產品 AmpereOne 處理器的新版本,擁有 12 個內存通道的最新處理器。正如 Ampere 在去年5月份的年度戰略和產品路線圖更新中提到的,公司正在構建
    的頭像 發表于 01-09 13:44 ?525次閱讀

    Arm KleidiAI助力提升PyTorch上LLM推理性能

    熱門的深度學習框架尤為突出,許多企業均會選擇其作為開發 AI 應用的庫。通過部署 Arm Kleidi 技術,Arm 正在努力優化 PyTorch,以加速在基于 Arm 架構的處理器上運行 LLM 的性能。Arm 通過將 Kle
    的頭像 發表于 12-03 17:05 ?1363次閱讀
    Arm KleidiAI助力提升PyTorch上LLM<b class='flag-5'>推理性能</b>

    英特爾?至強?可擴展處理器助力智慧醫療的數字化轉型

    醫療機構實現數據的收集、分析和輔助決策,從而提升醫療服務質量與效率。 ? 這一處理器內置的AI加速顯著提升了AI
    發表于 09-29 11:13 ?6285次閱讀
    英特爾?至強?可擴展<b class='flag-5'>處理器</b>助力智慧醫療的數字化轉型

    英特爾? 酷睿? Ultra 處理器面向多行業加速AI產業升級

    持競爭力,企業亟需更高效的計算平臺來處理日益復雜的數據分析和AI推理任務。 為響應這一時代需求,英特爾正式發布英特爾? 酷睿? Ultra
    發表于 09-14 20:36 ?1.3w次閱讀
    英特爾? 酷睿? Ultra <b class='flag-5'>處理器</b>面向多行業加速<b class='flag-5'>AI</b>產業升級

    開箱即用,AISBench測試展示英特爾至強處理器的卓越推理性能

    。 中國電子技術標準化研究院賽西實驗室依據國家標準《人工智能服務系統性能測試規范》(征求意見稿)相關要求,使用AISBench?2.0測試工具,完成了第五代英特爾至強可擴展處理器AI
    的頭像 發表于 09-06 15:33 ?685次閱讀
    開箱即用,AISBench測試展示英特爾至強<b class='flag-5'>處理器</b>的卓越<b class='flag-5'>推理性能</b>

    基于瑞薩RZ/V2H AI處理器的解決方案:高性能視覺AI系統

    RZ/V2H嵌入式AI處理器,采用瑞薩最新的DRP-AI3技術,可提供高達8TOPS(Dense模型)/80TOPS(sparse模型)的AI
    發表于 07-02 18:36 ?831次閱讀
    基于瑞薩RZ/V<b class='flag-5'>2</b>H <b class='flag-5'>AI</b>微<b class='flag-5'>處理器</b>的解決方案:高<b class='flag-5'>性能</b>視覺<b class='flag-5'>AI</b>系統