女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

PCIe在AI加速器中的作用

新思科技 ? 來源:新思科技 ? 2023-11-18 10:36 ? 次閱讀

從線上購物時(shí)的“猜你喜歡”、到高等級自動(dòng)駕駛汽車上的實(shí)時(shí)交通信息接收,再到在線視頻游戲,所有的這些都離不開人工智能AI)加速器。AI加速器是一種高性能的并行計(jì)算設(shè)備,旨在高效處理神經(jīng)網(wǎng)絡(luò)等AI工作負(fù)載并提供近乎實(shí)時(shí)的處理方案,從而實(shí)現(xiàn)一系列應(yīng)用。

為了讓AI加速器有效地完成自己的工作,數(shù)據(jù)必須要以極快的速度在AI加速器(作為設(shè)備)與CPUGPU(主機(jī))之間進(jìn)行快速且低延時(shí)的移動(dòng),而實(shí)現(xiàn)這一切的關(guān)鍵就在于PCI Express(PCIe)高速接口

PCIe大約每三年更新?lián)Q代一次,帶寬也會隨之翻倍,而這正是我們數(shù)據(jù)驅(qū)動(dòng)的數(shù)字世界所需要的。作為PCIe規(guī)范的最新版本,PCIe 6.0可提供:

每個(gè)引腳64 GT/s的數(shù)據(jù)傳輸速率

一種新的低功耗狀態(tài),從而實(shí)現(xiàn)更低的功耗

經(jīng)濟(jì)高效的性能

高性能的完整性和數(shù)據(jù)加密(IDE)

向后兼容前幾代

盡管PCIe過去可能通過PC上的插槽,連接顯卡和掃描儀等外圍設(shè)備,但得益于帶寬的不斷增加,PCIe的作用現(xiàn)在已遠(yuǎn)不止于此。本文將詳細(xì)介紹PCIe如何滿足AI加速器的日益增長的要求。

AI無處不在,PCIe也是如此

GlobalData的數(shù)據(jù)表明,AI正在芯片組領(lǐng)域中迅速普及,預(yù)計(jì)到2030年,超過40%的芯片組中都將包含AI硬件。人工智能(AI)和機(jī)器學(xué)習(xí)(ML)工作負(fù)載的復(fù)雜性仍在不斷增加。事實(shí)上,AI和ML訓(xùn)練模型的規(guī)模大約每隔幾個(gè)月就會翻一番。為了確保有效性,AI系統(tǒng)必須能在不犧牲性能或增加延遲的情況下,通過AI開發(fā)管道移動(dòng)大型數(shù)據(jù)集。不妨看一看下面這些帶寬密集型工作負(fù)載示例:

4K和8K高清視頻 — 需要更多計(jì)算能力和內(nèi)存

高分辨率和高動(dòng)態(tài)范圍 — 實(shí)現(xiàn)機(jī)器視覺和實(shí)時(shí)感知

多攝像頭陣列和4D傳感 — 實(shí)現(xiàn)深度和運(yùn)動(dòng)推理

所有這些趨勢都表明,AI加速器的關(guān)鍵在于提供強(qiáng)大的并行計(jì)算能力,讓語音激活和高等級自動(dòng)駕駛汽車等應(yīng)用能夠做出近乎實(shí)時(shí)的響應(yīng)。這些高性能機(jī)器既可以采用超大芯片的形式,例如用于深度學(xué)習(xí)系統(tǒng)的Cerebras晶圓級引擎(WSE);也可以是GPU、大規(guī)模多核標(biāo)量處理器或空間加速器,通過將數(shù)十到數(shù)百個(gè)芯片組合到一起,打造出具有數(shù)百petaFLOPS處理能力的大型系統(tǒng),用以處理大型神經(jīng)網(wǎng)絡(luò)。

838cee98-8534-11ee-939d-92fbcf53809c.png

PCIe發(fā)揮著高效的橋梁作用

由于能夠處理AI和ML工作負(fù)載,AI加速器可以增強(qiáng)數(shù)據(jù)中心服務(wù)器中CPU的處理能力,而PCIe則充當(dāng)兩者之間的橋梁。就其作用而言,PCIe具有以下優(yōu)勢:

最大限度提高芯片到芯片接口的帶寬,無論是用于大規(guī)模計(jì)算陣列中的AI加速器,還是邊緣的AI加速器

提供擴(kuò)展容量,以便在多個(gè)主機(jī)和多臺設(shè)備之間移動(dòng)數(shù)據(jù),因?yàn)镻CIe插槽可以支持各種類型的擴(kuò)展卡,包括AI加速器

支持通過多線程技術(shù)跨多個(gè)芯片并行處理工作負(fù)載

實(shí)現(xiàn)主機(jī)和設(shè)備之間的通用互操作性,使得能夠在系統(tǒng)運(yùn)行時(shí)無縫添加或移除AI加速器卡

提供低功耗PCIe 6.0 L0p模式,能夠以更少的通道支持所需的數(shù)據(jù)流量,從而可以降低功耗,幫助最大限度地減少碳足跡

提供數(shù)據(jù)保密性、完整性和重發(fā)保護(hù)功能,確保傳輸中的數(shù)據(jù)免受嗅探、篡改、刪除、插入或重發(fā)數(shù)據(jù)包攻擊

要充分利用這種安全的高速接口,經(jīng)驗(yàn)證的PCIe物理層(PHY)和具有IDE安全性的控制器IP是關(guān)鍵,而相關(guān)的專業(yè)知識也對幫助開展相應(yīng)設(shè)計(jì)至關(guān)重要。功耗和信號完整性方面的考量則突顯了專家支持的重要作用。AI加速通常需要許多高速通道。PCIe的多個(gè)通道同時(shí)切換會產(chǎn)生大量功耗,這使得電源完整性成為一個(gè)問題。如果在同時(shí)切換過程中出現(xiàn)IR壓降等問題,則不利于充分發(fā)揮全部性能。信號完整性也很重要,因?yàn)橄到y(tǒng)中在AI加速器和CPU之間傳輸?shù)男盘柋仨毻旰脽o損。新思科技內(nèi)部擁有功耗和信號完整性方面的專家,他們能夠模擬多通道環(huán)境,指導(dǎo)開發(fā)者在設(shè)計(jì)芯片時(shí)將支持PCIe的PHY放置在合適位置,從而實(shí)現(xiàn)最佳性能。

83c3942a-8534-11ee-939d-92fbcf53809c.png

新思科技是PCIe IP和PCIe協(xié)議驗(yàn)證解決方案(包括驗(yàn)證IP)的行業(yè)領(lǐng)導(dǎo)者,新思科技的PCIe專家也是PCI-SIG聯(lián)盟(負(fù)責(zé)編寫PCIe總線規(guī)范)的主要貢獻(xiàn)者。新思科技的PCIe產(chǎn)品組合,以及各種具有向后兼容性的組件,包括:

新思科技PHY IP,通過自適應(yīng)數(shù)字信號處理(DSP算法來優(yōu)化數(shù)字均衡,以跨底板、網(wǎng)絡(luò)接口卡(NIC)及芯片到芯片通道實(shí)現(xiàn)高能效

新思科技控制器IP,具有與新思科技IDE安全I(xiàn)P模塊緊密集成的架構(gòu),其中包含多個(gè)接口,旨在盡可能降低延遲并提高吞吐量

新思科技驗(yàn)證IP,可加速測試平臺開發(fā),并且具有內(nèi)置驗(yàn)證計(jì)劃、驗(yàn)證序列和功能覆蓋范圍

用于新思科技ZeBu硬件加速系統(tǒng)和新思科技HAPS原型系統(tǒng)的新思科技協(xié)議接口卡、在線和虛擬解決方案,可實(shí)現(xiàn)軟件驅(qū)動(dòng)的系統(tǒng)驗(yàn)證、性能分析、認(rèn)證和流片前合規(guī)性測試

除了端到端PCIe IP解決方案,新思科技的IP核組合還包括內(nèi)存、處理器及其他用于AI加速器的接口IP。全棧式AI驅(qū)動(dòng)型電子設(shè)計(jì)自動(dòng)化(EDA)套件Synopsys.ai現(xiàn)已搭載能夠顯著加快專用AI加速器設(shè)計(jì)的功能。在驗(yàn)證方面,AI SoC需要更快的流片前硬件輔助驗(yàn)證解決方案。新思科技的ZeBu Server 5和HAPS系統(tǒng)提供了超快且容量超大的硬件輔助驗(yàn)證(HAV)系統(tǒng),有助于完成各種復(fù)雜SoC設(shè)計(jì)的所有系統(tǒng)級驗(yàn)證用例。

PCIe接下來的發(fā)展方向如何?

下一代PCIe有望達(dá)到速度驚人的2.048TB。隨著越來越多的設(shè)備和系統(tǒng)融入AI,任何能夠滿足AI速度需求的創(chuàng)新都是利好消息。對于現(xiàn)今和未來的AI加速器來說,不斷發(fā)展的PCIe高速接口有望與之?dāng)y手共進(jìn),讓日常生活變得更加智能

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    34256

    瀏覽量

    275399
  • 高速接口
    +關(guān)注

    關(guān)注

    1

    文章

    57

    瀏覽量

    14939
  • PCIe
    +關(guān)注

    關(guān)注

    16

    文章

    1324

    瀏覽量

    84677
  • 新思科技
    +關(guān)注

    關(guān)注

    5

    文章

    854

    瀏覽量

    51214

原文標(biāo)題:AI低延遲應(yīng)用,怎么缺少PCIe高速接口?

文章出處:【微信號:Synopsys_CN,微信公眾號:新思科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    嵌入式AI加速器DRP-AI 詳細(xì)介紹

    的嵌入式設(shè)備。此外,人工智能正在不斷發(fā)展,新的算法不時(shí)被開發(fā)出來。 人工智能快速發(fā)展的過程,瑞薩開發(fā)了人工智能加速器(DRP-AI)和軟件(DRP-
    的頭像 發(fā)表于 03-15 16:13 ?870次閱讀
    嵌入式<b class='flag-5'>AI</b><b class='flag-5'>加速器</b>DRP-<b class='flag-5'>AI</b> 詳細(xì)介紹

    AI MPU# 瑞薩RZ/V2H 四核視覺 ,采用 DRP-AI3 加速器和高性能實(shí)時(shí)處理

    RZ/V2H 高端 AI MPU 采用瑞薩電子專有的AI 加速器-動(dòng)態(tài)可重配置處理 (DRP-AI3)、四核 Arm^?^ Cortex
    的頭像 發(fā)表于 03-15 11:50 ?1297次閱讀
    <b class='flag-5'>AI</b> MPU# 瑞薩RZ/V2H 四核視覺 ,采用 DRP-<b class='flag-5'>AI</b>3 <b class='flag-5'>加速器</b>和高性能實(shí)時(shí)處理<b class='flag-5'>器</b>

    小型加速器中子源監(jiān)測系統(tǒng)解決方案

    小型加速器中子源是一種基于先進(jìn)加速器技術(shù)的中子產(chǎn)生裝置,憑借體積小、成本低、安全性高的優(yōu)勢,醫(yī)學(xué)、工業(yè)、科研、安全、能源等多個(gè)領(lǐng)域展現(xiàn)出巨大的應(yīng)用潛力和價(jià)值。無論是用于醫(yī)學(xué)領(lǐng)域的精準(zhǔn)放療,還是工業(yè)
    的頭像 發(fā)表于 03-13 11:19 ?536次閱讀
    小型<b class='flag-5'>加速器</b>中子源監(jiān)測系統(tǒng)解決方案

    消息稱AMD Instinct MI400 AI加速器將配備8個(gè)計(jì)算芯片

    對比,目前的 MI300 系列加速器每個(gè) AID 僅包含 2 個(gè)加速計(jì)算芯片 ,MI400 芯片數(shù)量上實(shí)現(xiàn)了翻倍。如此一來,MI400 具備更強(qiáng)的并行處理
    的頭像 發(fā)表于 02-05 15:07 ?801次閱讀

    存儲需要Passion!德明利PCIe Gen5 SSD加速AI應(yīng)用落地

    存儲需要Passion!德明利PCIe Gen5 SSD加速AI應(yīng)用落地
    的頭像 發(fā)表于 01-21 16:33 ?580次閱讀
    存儲需要Passion!德明利<b class='flag-5'>PCIe</b> Gen5 SSD<b class='flag-5'>加速</b><b class='flag-5'>AI</b>應(yīng)用落地

    英偉達(dá)AI加速器新藍(lán)圖:集成硅光子I/O,3D垂直堆疊 DRAM 內(nèi)存

    冷板。 英偉達(dá)給出的模型,每個(gè) AI 加速器復(fù)合體包含 4 個(gè) GPU 模塊,每個(gè) GPU 模塊與 6 個(gè)小型 DRAM 內(nèi)存
    的頭像 發(fā)表于 12-13 11:37 ?567次閱讀
    英偉達(dá)<b class='flag-5'>AI</b><b class='flag-5'>加速器</b>新藍(lán)圖:集成硅光子I/O,3D垂直堆疊 DRAM 內(nèi)存

    從版本控制到全流程支持:揭秘Helix Core如何成為您的創(chuàng)意加速器

    加速器
    龍智DevSecOps
    發(fā)布于 :2024年11月26日 13:42:47

    IBM與AMD攜手部署MI300X加速器,強(qiáng)化AI與HPC能力

    近日,據(jù)外媒最新報(bào)道,國際商業(yè)機(jī)器公司(IBM)與超威半導(dǎo)體公司(AMD)已正式宣布達(dá)成一項(xiàng)重要合作。雙方將攜手IBM Cloud上部署AMD的Instinct MI300X加速器,這一創(chuàng)新
    的頭像 發(fā)表于 11-21 11:07 ?645次閱讀

    IBM將在云平臺部署AMD加速器

    IBM與AMD近期宣布了一項(xiàng)重要合作協(xié)議,根據(jù)協(xié)議,IBM將在其云平臺上部署AMD Instinct MI300X加速器。這一舉措旨在提升企業(yè)客戶在生成式AI模型方面的性能和能效,進(jìn)一步推動(dòng)AI技術(shù)的創(chuàng)新與應(yīng)用。
    的頭像 發(fā)表于 11-19 16:24 ?503次閱讀

    磁調(diào)制式電流傳感粒子加速器的應(yīng)用

    粒子加速器是一種利用電磁場加速帶電粒子(如質(zhì)子、電子、離子等)至極高速度的裝置。其工作原理基于洛倫茲力定律,即當(dāng)帶電粒子電磁場運(yùn)動(dòng)時(shí),會受到垂直于其速度方向的力
    的頭像 發(fā)表于 11-14 11:43 ?499次閱讀

    SiFive發(fā)布MX系列高性能AI加速器IP

    AI技術(shù)日新月異的今天,RISC-V IP設(shè)計(jì)領(lǐng)域的領(lǐng)軍企業(yè)SiFive再次引領(lǐng)行業(yè)潮流,正式推出了其革命性的SiFive Intelligence XM系列高性能AI加速器IP。這
    的頭像 發(fā)表于 09-24 14:46 ?710次閱讀

    下一代高功能新一代AI加速器(DRP-AI3):10x高級AI系統(tǒng)高級AI更快的嵌入處理

    電子發(fā)燒友網(wǎng)站提供《下一代高功能新一代AI加速器(DRP-AI3):10x高級AI系統(tǒng)高級AI
    發(fā)表于 08-15 11:06 ?0次下載
    下一代高功能新一代<b class='flag-5'>AI</b><b class='flag-5'>加速器</b>(DRP-<b class='flag-5'>AI</b>3):10x<b class='flag-5'>在</b>高級<b class='flag-5'>AI</b>系統(tǒng)高級<b class='flag-5'>AI</b><b class='flag-5'>中</b>更快的嵌入處理

    “白地板”方案,智算中心加速器

    明德源能白地板方案,智算中心加速器
    的頭像 發(fā)表于 06-21 11:54 ?1100次閱讀

    西門子推出Catapult AI NN軟件,賦能神經(jīng)網(wǎng)絡(luò)加速器設(shè)計(jì)

    西門子數(shù)字化工業(yè)軟件近日發(fā)布了Catapult AI NN軟件,這款軟件神經(jīng)網(wǎng)絡(luò)加速器設(shè)計(jì)領(lǐng)域邁出了重要一步。Catapult AI NN軟件專注于
    的頭像 發(fā)表于 06-19 11:27 ?1188次閱讀

    PCIe載板設(shè)計(jì)原理圖:636-基于FMC的Kintex XCKU060高性能PCIe AD采集板卡 AI加速計(jì)卡

    PCIe載板, AD采集板卡, AI加速計(jì)算, 3U VPX
    的頭像 發(fā)表于 06-17 16:29 ?1301次閱讀
    <b class='flag-5'>PCIe</b>載板設(shè)計(jì)原理圖:636-基于FMC的Kintex XCKU060高性能<b class='flag-5'>PCIe</b> AD采集板卡 <b class='flag-5'>AI</b><b class='flag-5'>加速</b>計(jì)卡