女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

生成式AI帶火的不止GPU,網絡芯片迎來下一輪大戰(zhàn)

E4Life ? 來源:電子發(fā)燒友網 ? 作者:周凱揚 ? 2023-06-30 01:08 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網報道(文/周凱揚)在生成式AI的熱度之下,橫向擴展AI訓練與推理性能成了每個云服務廠商、數據中心以及互聯網廠商追求的目標,這點從前段時間的GPU搶購潮就能看出來,龐大的GPU基數在當下幾乎可以和強大的AI算力畫上等號。

然而,真正將這些GPU連接起來的,還是靠以太網交換機、路由這類網絡芯片。隨著數據中心解耦趨勢愈發(fā)明顯,相繼認識到這一點的網絡芯片廠商都開始新一輪的軍備競賽,諸如博通、美滿和思科等廠商都已經加快了新品推出的節(jié)奏。

博通Tomahawk

作為在數據中心網絡芯片耕耘了12年以上的博通,從640G的Trident系列到25.6T的Tomahawk4系列,已經完成了多次設計迭代,顯著提高了網絡芯片的帶寬。今年三月,博通終于發(fā)布了Tomahawk 5系列網絡芯片,也是市面上首個量產51.2Tbps交換帶寬的芯片。

新的Tomahawk 5系列無疑是在暴漲的AI需求下誕生的,我們從其設計中也能看出。由于做到了更高的端口密度,Tomahawk 5可以實現256高性能AI/ML加速器之間的單跳連接,且每個都能做到200Gbps的網絡帶寬。這對于數據中心的AI訓練和推理的負載來說,無疑提高了吞吐效率,尤其是日益流行且愈發(fā)復雜的生成式AI模型。

wKgZomSdWGCACur4AAFkjhy-LfI022.jpg
Trident和Tomahawk芯片路線圖 / 博通


在物理設計上,Tomahawk 5采用了如今已經趨近成熟的共封裝光學(CPO)方案,相較過去的光模塊在前端面板插拔的方案,CPO選擇將網絡交換芯片和光模塊封裝在一起。這一封裝方案結合5nm的芯片工藝,將功耗進一步降低了30%。

另外值得一提的是,博通的第三條網絡芯片產品線,Jericho,也在近期迎來了新品Jericho3-AI。相比以高帶寬為重心的Tomahawk產品線,和主打更多功能性的Trident產品線,Jericho往往以較低帶寬、深度緩存和高可編程性著稱。

而Jericho3-AI雖然確實是28.8T的以太網交換機芯片,卻針對AI訓練負載做了特殊的優(yōu)化,更高的端口密度使得Jericho3-AI可以在單個集群中連接32000個GPU,并做到800Gbps的連接帶寬表現。博通甚至將其與英偉達自己的InfiniBand方案對比,Jericho3-AI在完成時間上有著10%左右的優(yōu)勢。這也是Jericho系列獨有的優(yōu)勢,實現標準以太網芯片無法實現卻在AI或HPC應用上被看重的靈活功能。

思科Silicon One

其實早在2019年思科首次推出Silicon One網絡芯片時,博通CEO霍克·譚就表示:“思科在該市場的參與,恰巧驗證了我們推進的這一行業(yè)趨勢,也就是數據中心的解耦。我們很高興自己再次押對了,也歡迎更多的競爭。”要知道,之前的思科可是博通的優(yōu)質客戶之一,如今身份的轉變已經對網絡芯片的市場格局產生了不小的影響。

wKgaomSdWGqAN4RAAAF6las7nPg625.jpg
Silicon One芯片路線圖 / 思科


在第一代自研芯片Silicon One發(fā)布三年半之后,思科在近日終于推出了該產品線的第四代產品,以太網交換機芯片G200和G202。其中G200專注于統(tǒng)一架構和基于以太網的AI/ML應用部署,這個采用 5nm工藝打造的芯片,基于512個112Gbps SerDes打造,同樣可以做到51.2Tbps的交換帶寬。

而G202則是針對想要繼續(xù)使用50G SerDes的客戶打造的,同樣基于5nm的工藝,G202采用了512x56Gbps SerDes的配置,其特性與G200完全一致,只不過交換性能只有G200的一半。

根據思科的說法,由于單設備512個100GE以太網端口的超高端口密度,客戶可以在一個雙層網絡上構建由32000個400G GPU組成的AI/ML集群。借助G200打造這樣一個龐大的網絡,卻依然可以省去50%的光學組件、40%左右的交換機,極大減少這類集群的碳足跡,每年最高可以省下900萬kWh的耗能。據了解,G200已經送樣給六大云服務商中的五家進行測試了。

美滿Teralynx

在收購由幾位前博通高管打造的芯片初創(chuàng)公司Innovium后,美滿也開始了他們的網絡芯片逆襲。同樣是在今年3月,美滿也推出了自己的51.2Tbps交換機芯片,Teralynx 10。相比其他兩家,美滿為Teralynx 10選擇的定位是超低延遲的可編程交換機芯片,這也是此前Innovium的設計目標。

不過直至目前為止,美滿并沒有將Teralynx并入自己的Prestera產品線內,看來Prestera應該還是主打企業(yè)與邊緣數據中心市場,而面向云端數據中心的Teralynx系列繼續(xù)沿用原來的產品線名稱。

除了用到業(yè)界頂級的112G SerDes IP和先進的工藝實現低功耗的系統(tǒng)設計以外,美滿電子宣稱Teralynx 10可以提供1.7倍的延遲優(yōu)勢,這對于生成式AI這種看重完成時間和網絡傳輸時間的應用來說至關重要。

wKgaomSdWHOATyvjAACvKFyVHqE636.png
企業(yè)與數據中心的交換芯片方案 / 美滿


還有一點與其他兩家不同的是,Teralynx 10可以驅動128個400Gbps端口、64個800Gbps端口和32個1.6Tbps端口,1.6Tbps的端口驅動能力可以說是放眼未來了,這也意味著Teralynx 10可以直接在1RU大小的機柜中實現51.2Tbps的性能。

為此,美滿也推出了Nova這一業(yè)界首個做到1.6Tbps的PAM4電光平臺,Nova基于美滿的200Gbps/lambda光DSP打造,足以為1.6Tbps的可插拔光模塊提供支持。由于DSP的帶寬翻倍,基于Nova的光模塊不僅減少了所需激光和相關光學組件的數量,相較其他的方案來說穩(wěn)定性也同樣加倍。雖然800Gbps的光模塊仍在普及中,但要想在下一代數據中心交換網絡中搶占先機,1.6Tbps的光模塊也該盡快提上日程了。

寫在最后

之所以這些廠商都能這么快推出下一代高性能網絡芯片,其實還是靠EDA/IP和封裝技術打好了第一波基礎,廠商們先一步推出了完善的以太網IP和共封裝光學方案。不過這也意味著過去數據中心交換硬件很可能迎來新一波的換代,從目前來看應該是只有大型云服務廠商有這個資本進行大規(guī)模替換。

但除了這些網絡芯片公司之間的斗爭之外,他們也需要提防英偉達這樣既有GPU業(yè)務又有網絡芯片業(yè)務的廠商。以上提到的這三家在推出的新品上都有劍指英偉達InfiniBand的意思,畢竟后者從一開始就是為了HPC和AI打造的通信標準,而它們則是剛從Web Scaling轉向AI Scaling,從外部網絡交換轉為內部網絡交換,仍需要不斷提升產品性能才能在這個競爭激烈的市場上存活下去。

不過這也可以看出AI帶來的熱度,因為無論是從軟件還是從硬件上,產品的迭代速度都有了成倍提升。800GbE時代的到來,也導致所有想在服務器市場創(chuàng)造增長的廠商紛紛趨之若鶩,好在這樣的趨勢恰恰是服務器市場急需的一劑強心劑。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4949

    瀏覽量

    131345
  • AI
    AI
    +關注

    關注

    88

    文章

    35217

    瀏覽量

    280398
  • 生成式AI
    +關注

    關注

    0

    文章

    531

    瀏覽量

    825
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    谷歌新生成AI媒體模型登陸Vertex AI平臺

    我們在 Vertex AI 上推出新生成 AI 媒體模型: Imagen 4、Veo 3 和 Lyria 2。
    的頭像 發(fā)表于 06-18 09:56 ?388次閱讀

    適用于數據中心和AI時代的800G網絡

    數據中心依賴數千甚至上萬個GPU集群進行高性能計算,對帶寬、延遲和數據交換效率提出極高要求。 AI云:以生成AI為核心的云平臺,為多
    發(fā)表于 03-25 17:35

    聚云科技榮獲亞馬遜云科技生成AI能力認證

    助力企業(yè)加速生成AI應用落地 北京2025年2月14日?/美通社/ -- 云管理服務提供商聚云科技獲得亞馬遜云科技生成
    的頭像 發(fā)表于 02-14 16:07 ?412次閱讀

    聚云科技榮獲亞馬遜云科技生成AI能力認證 助力企業(yè)加速生成AI應用落地

    北京 ——2025 年 2 月 14 日 云管理服務提供商聚云科技獲得亞馬遜云科技生成AI能力認證,利用亞馬遜云科技全托管的生成
    發(fā)表于 02-14 13:41 ?160次閱讀

    生成AI推理技術、市場與未來

    (reasoning)能力,這轉變將極大推動上層應用的發(fā)展。 紅杉資本近期指出,在可預見的未來,邏輯推理和推理時計算將是個重要主題,并開啟生成
    的頭像 發(fā)表于 01-20 11:16 ?860次閱讀
    <b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>推理技術、市場與未來

    生成AI工具好用嗎

    當下,生成AI工具正以其強大的內容生成能力,為用戶帶來了前所未有的便捷與創(chuàng)新。那么,生成
    的頭像 發(fā)表于 01-17 09:54 ?469次閱讀

    生成AI”半導體需求飆漲,芯原微AI IP領域有哪些亮眼產品

    全球范圍內出貨量超過1億顆,在10個應用領域超過70家客戶使用我們的IP,生產出128款AI芯片。芯原圖形處理器(GPU)產品全球累計出貨量20億顆。” 芯原執(zhí)行副總裁汪洋近日在深圳舉辦的高峰論壇上對媒體表示。 ? 近年來
    的頭像 發(fā)表于 11-13 01:26 ?3781次閱讀
    “<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>”半導體需求飆漲,芯原微<b class='flag-5'>AI</b> IP領域有哪些亮眼產品

    GPU服務器AI網絡架構設計

    眾所周知,在大型模型訓練中,通常采用每臺服務器配備多個GPU的集群架構。在上篇文章《高性能GPU服務器AI網絡架構(上篇)》中,我們對
    的頭像 發(fā)表于 11-05 16:20 ?1264次閱讀
    <b class='flag-5'>GPU</b>服務器<b class='flag-5'>AI</b><b class='flag-5'>網絡</b>架構設計

    雷諾下一代車載語音助手Reno將引入生成AI技術

    11月1日,賽思軟件技術公司與雷諾公司宣布深化合作,旨在將生成AI技術和類人交互功能融入雷諾下一代多模態(tài)虛擬車載助手Reno中。
    的頭像 發(fā)表于 11-01 16:39 ?1815次閱讀

    榮耀迎來一輪投資,中國電信、中金資本等加入

    據最新報道,榮耀在其股權改革進程中迎來了新一輪投資者的加入,包括中國電信、中金資本旗下基金、基石資本旗下基金、特發(fā)基金,以及新成立的代理商投資平臺金石星耀等。   榮耀方面表示,此次融資堅持公開透明的原則,旨在進步推動股
    的頭像 發(fā)表于 10-31 13:44 ?1149次閱讀

    生成AI工具作用

    生成AI工具是指那些能夠自動生成文本、圖像、音頻、視頻等多種類型數據的人工智能技術。在此,petacloud.ai小編為您整理
    的頭像 發(fā)表于 10-28 11:19 ?760次閱讀

    印孚瑟斯與微軟擴大戰(zhàn)略合作,加速客戶云與AI轉型

    印孚瑟斯(Infosys)近日宣布與微軟(Microsoft)進步擴大戰(zhàn)略合作,旨在加速全球客戶對生成人工智能(AI)和Microsof
    的頭像 發(fā)表于 10-11 16:20 ?584次閱讀

    OpenAI新一輪融資66億美元,鞏固AI領先地位

    近日,美國人工智能領域的佼佼者OpenAI宣布,在最新一輪融資中成功籌集了高達66億美元的資金。此次融資后,OpenAI的估值飆升至1570億美元,再次彰顯了其在全球AI領域的強勁實力。
    的頭像 發(fā)表于 10-08 14:44 ?617次閱讀

    三行代碼完成生成AI部署

    OpenVINO2024.2版本跟之前版本最大的不同是OpenVINO2024.2分為兩個安裝包分別是基礎包與生成AI支持包,新發(fā)布的GenAI開發(fā)包支持C++與Python語言接口調用,支持多種
    的頭像 發(fā)表于 08-30 16:49 ?776次閱讀
    三行代碼完成<b class='flag-5'>生成</b><b class='flag-5'>式</b><b class='flag-5'>AI</b>部署

    OpenAI自研芯片計劃調整,傳交臺積電生產

    近日,全球領先的生成AI應用大廠OpenAI在自研芯片領域迎來了重大戰(zhàn)略調整。為降低對外部
    的頭像 發(fā)表于 07-23 16:52 ?971次閱讀