女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

深入解讀Grace CPU芯片架構

架構師技術聯(lián)盟 ? 來源:半導體行業(yè)觀察 ? 2023-02-02 11:47 ? 次閱讀

NVIDIA Grace CPU是 NVIDIA 開發(fā)的第一款數(shù)據(jù)中心 CPU。通過將 NVIDIA 專業(yè)知識與 Arm 處理器、片上結構、片上系統(tǒng) (SoC) 設計和彈性高帶寬低功耗內存技術相結合。參考內容“NVIDIA GraceCPU處理器合集”。

NVIDIA Grace CPU 從頭開始構建,以創(chuàng)建世界上第一個用于計算的超級芯片(super chip)。超級芯片的核心是NVLink Chip-2-Chip (C2C),它允許 NVIDIA Grace CPU 以 900 GB/s 的雙向帶寬與超級芯片中的另一個 NVIDIA Grace CPU 或NVIDIA Hopper GPU進行通信

NVIDIA Grace Hopper Superchip將節(jié)能、高帶寬的 NVIDIA Grace CPU 與功能強大的 NVIDIA H100 Hopper GPU 結合使用 NVLink-C2C,以最大限度地提高強大的高性能計算 (HPC) 和巨型 AI 工作負載的能力。 NVIDIA Grace CPU 超級芯片是使用兩個通過 NVLink-C2C 連接的 Grace CPU 構建的。該超級芯片建立在現(xiàn)有 Arm 生態(tài)系統(tǒng)的基礎上,為 HPC、要求苛刻的云工作負載以及高性能和高能效的密集基礎設施創(chuàng)建了首個毫不妥協(xié)的 Arm CPU。 在本文中,您將了解 NVIDIA Grace CPU 超級芯片以及提供 NVIDIA Grace CPU 性能和能效的技術。有關詳細信息。

cde8af2a-a2ab-11ed-bfe3-dac502259ad0.png

圖 1. 與雙插槽 Milan 7763 CPU 相比,NVIDIA Grace CPU Superchip 上應用程序的性能和節(jié)能效果

專為 HPC 和 AI 工作負載打造的超級芯片

NVIDIA Grace CPU 超級芯片通過將旗艦雙路 x86-64 服務器或工作站平臺提供的性能水平集成到單個超級芯片中,代表了計算平臺設計的一場革命。高效的設計可在較低的功率范圍內實現(xiàn) 2 倍的計算密度。

cdfc2992-a2ab-11ed-bfe3-dac502259ad0.png

NVIDIA Grace CPU 旨在提供高單線程性能、高內存帶寬和出色的數(shù)據(jù)移動能力,每瓦性能領先。NVIDIA Grace CPU Superchip 結合了兩個連接超過 900 GB/s 雙向帶寬 NVLink-C2C 的 NVIDIA Grace CPU,提供 144 個高性能 Arm Neoverse V2 內核和高達 1 TB/s 帶寬的數(shù)據(jù)中心級 LPDDR5X 內存,帶糾錯碼( ECC)內存。

ce11bd20-a2ab-11ed-bfe3-dac502259ad0.png

圖2. 具有 900 GB/s NVLink-C2C 的 NVIDIA Grace CPU 超級芯片

使用 NVLink-C2C 互連緩解瓶頸

為了擴展到 144 個 Arm Neoverse V2 內核并在兩個 CPU 之間移動數(shù)據(jù),NVIDIA Grace CPU Superchip 需要在 CPU 之間建立高帶寬連接。NVLink C2C 互連在兩個 NVIDIA Grace CPU 之間提供高帶寬直接連接,以創(chuàng)建 NVIDIA Grace CPU 超級芯片。

使用 NVIDIA Scalable Coherency Fabric 擴展內核和帶寬

現(xiàn)代 CPU 工作負載需要快速的數(shù)據(jù)移動。由 NVIDIA 設計的可擴展一致性結構 (SCF) 是一種網(wǎng)狀結構和分布式緩存架構,旨在擴展內核和帶寬(圖 3)。SCF 提供超過 3.2 TB/s 的總二分帶寬,以保持數(shù)據(jù)在 CPU 內核、NVLink-C2C、內存和系統(tǒng) IO 之間流動。 CPU 核心和 SCF 緩存分區(qū)分布在整個網(wǎng)格中,而緩存交換節(jié)點通過結構路由數(shù)據(jù)并充當 CPU、緩存內存和系統(tǒng) IO 之間的接口。NVIDIA Grace CPU 超級芯片在兩個芯片上具有 234 MB 的分布式三級緩存。

ce212ec2-a2ab-11ed-bfe3-dac502259ad0.jpg

圖3. NVIDIA Grace CPU 和可擴展一致性結構

LPDDR5X

能效和內存帶寬都是數(shù)據(jù)中心 CPU 的關鍵組成部分。NVIDIA Grace CPU Superchip 使用高達 960 GB 的服務器級低功耗 DDR5X (LPDDR5X) 內存和 ECC。此設計為大規(guī)模 AI 和 HPC 工作負載實現(xiàn)了帶寬、能效、容量和成本的最佳平衡。 與八通道 DDR5 設計相比,NVIDIA Grace CPU LPDDR5X 內存子系統(tǒng)以每千兆字節(jié)每秒八分之一的功率提供高達 53% 的帶寬,同時成本相似。HBM2e 內存子系統(tǒng)本可以提供大量內存帶寬和良好的能效,但每 GB 成本是其 3 倍多,并且僅為 LPDDR5X 可用最大容量的八分之一。 LPDDR5X 較低的功耗降低了整體系統(tǒng)功率要求,并使更多資源能夠用于 CPU 內核。緊湊的外形使基于 DIMM 的典型設計的密度提高了 2 倍。

NVIDIA Grace CPU I/O

NVIDIA Grace CPU Superchip 支持多達 128 條用于 IO 連接的 PCIe Gen 5 通道。8 個 PCIe Gen 5 x16 鏈路中的每一個都支持高達 128 GB/s 的雙向帶寬,并且可以分為 2x8 個以提供額外的連接,并且可以支持各種 PCIe 插槽形狀因數(shù),開箱即用地支持NVIDIA GPU和NVIDIA DPU、NVIDIA ConnectX SmartNIC、E1.S 和 M.2 NVMe 設備、模塊化 BMC 選項等。?

NVIDIA Grace CPU 核心架構

為了實現(xiàn)最大的工作負載加速,快速高效的 CPU 是系統(tǒng)設計的重要組成部分。Grace CPU 的核心是 Arm Neoverse V2 CPU 內核。Neoverse V2 是 Arm V 系列基礎架構 CPU 內核中的最新產(chǎn)品,經(jīng)過優(yōu)化可提供領先的每線程性能,同時與傳統(tǒng) CPU 相比提供領先的能效。

ce3caf44-a2ab-11ed-bfe3-dac502259ad0.jpg

圖4. NVIDIA Grace CPU 的 Arm Neoverse V2 內核

Arm架構

NVIDIA Grace CPU Neoverse V2 核心實現(xiàn)了 Armv9-A 架構,它將 Armv8-A 架構中定義的架構擴展到 Armv8.5-A。為 Armv8.5-A 之前的 Armv8 架構構建的任何應用程序二進制文件都將在 NVIDIA Grace CPU 上執(zhí)行。這包括針對 Ampere Altra、AWS Graviton2 和AWS Graviton3等 CPU 的二進制文件。

SIMD指令

Neoverse V2 在 4×128 位配置中實現(xiàn)了兩個單指令多數(shù)據(jù) (SIMD) 向量指令集:可擴展向量擴展版本 2 (SVE2) 和高級 SIMD (NEON)。四個 128 位功能單元中的每一個都可以退出 SVE2 或 NEON 指令。這種設計使更多代碼能夠充分利用 SIMD 性能。SVE2 通過高級指令進一步擴展了 SVE ISA,這些指令可以加速機器學習、基因組學和密碼學等關鍵 HPC 應用程序。

原子操作(Atomic operation)

NVIDIA Grace CPU 支持在 Armv8.1 中首次引入的大型系統(tǒng)擴展 (LSE)。LSE 提供低成本的原子操作,可以提高 CPU 到 CPU 通信、鎖和互斥鎖的系統(tǒng)吞吐量。這些指令可以對整數(shù)數(shù)據(jù)進行操作。所有支持 NVIDIA Grace CPU 的編譯器都將在同步函數(shù)中自動使用這些指令,例如 GNU 編譯器集合__atomic內置函數(shù)和std::atomic. 當使用 LSE 原子而不是加載/存儲獨占時,改進可以達到一個數(shù)量級。

Armv9 附加功能

NVIDIA Grace CPU實現(xiàn)了Armv9 產(chǎn)品組合的多項關鍵功能,可在通用數(shù)據(jù)中心 CPU 中提供實用程序,包括但不限于加密加速、可擴展分析擴展、虛擬化擴展、全內存加密、安全啟動等。

NVIDIA Grace CPU 軟件

NVIDIA Grace CPU Superchip 旨在為軟件開發(fā)人員提供符合標準的平臺。 NVIDIA Grace CPU 符合 Arm 服務器基礎系統(tǒng)架構 (SBSA),以支持符合標準的硬件和軟件接口。此外,為了在基于 Grace CPU 的系統(tǒng)上啟用標準引導流程,Grace CPU 被設計為支持 Arm 服務器基本引導要求 (SBBR)。所有主要的 Linux 發(fā)行版,以及它們提供的大量軟件包,都可以在 NVIDIA Grace CPU 上完美運行,無需修改。 編譯器、庫、工具、分析器、系統(tǒng)管理實用程序以及用于容器化和虛擬化的框架現(xiàn)已上市,并且可以像在任何其他數(shù)據(jù)中心 CPU 上一樣輕松地在 NVIDIA Grace CPU 上安裝和使用。 此外,整個 NVIDIA 軟件堆棧都可用于 NVIDIA Grace CPU。NVIDIA HPC SDK 和每個 CUDA 組件都有 Arm 原生安裝程序和容器。NVIDIA GPU Cloud (NGC) 還提供深度學習、機器學習和針對 Arm 優(yōu)化的 HPC 容器。NVIDIA Grace CPU 遵循主流 CPU 設計原則,并且與任何其他服務器 CPU 一樣進行編程

ce504d1a-a2ab-11ed-bfe3-dac502259ad0.png

圖 5. NVIDIA Grace CPU 軟件生態(tài)系統(tǒng)將用于 CPU、GPU 和 DPU 的全套 NVIDIA 軟件與完整的 Arm 數(shù)據(jù)中心生態(tài)系統(tǒng)相結合

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    19799

    瀏覽量

    233441
  • cpu
    cpu
    +關注

    關注

    68

    文章

    11031

    瀏覽量

    215909
  • NVIDIA
    +關注

    關注

    14

    文章

    5238

    瀏覽量

    105730
  • 芯片架構
    +關注

    關注

    1

    文章

    31

    瀏覽量

    14686

原文標題:深入解讀Grace CPU芯片架構

文章出處:【微信號:架構師技術聯(lián)盟,微信公眾號:架構師技術聯(lián)盟】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    借助NVIDIA技術加速半導體芯片制造

    NVIDIA Blackwell GPU、NVIDIA Grace CPU、高速 NVIDIA NVLink 網(wǎng)絡架構和交換機,以及諸如 NVIDIA cuDSS 和 NVIDIA cuLitho 等特定領域的 NVIDIA C
    的頭像 發(fā)表于 05-27 13:59 ?139次閱讀

    NVIDIA Grace CPU C1獲得廣泛支持

    NVIDIA 在本周 COMPUTEX 上重點展示了其全新的 Grace CPU C1,并獲得多家主要原始設計制造商合作伙伴的大力支持。
    的頭像 發(fā)表于 05-22 10:01 ?129次閱讀

    深入解讀智多晶FIR IP

    在數(shù)字信號處理領域,F(xiàn)IR 濾波器憑借其穩(wěn)定性強、線性相位等優(yōu)勢,被廣泛應用于各類信號處理場景。今天,就帶大家深入解讀西安智多晶微電子有限公司推出的FIR IP。
    的頭像 發(fā)表于 03-20 17:08 ?356次閱讀
    <b class='flag-5'>深入</b><b class='flag-5'>解讀</b>智多晶FIR IP

    芯來科技攜手芯芒科技發(fā)布RISC-V CPU系統(tǒng)仿真平臺

    專業(yè)RISC-V處理器IP及解決方案公司芯來科技與杭州芯芒科技深入合作,共同研發(fā)推出芯來全系列RISC-V CPU系統(tǒng)仿真平臺。幫助下游SoC和產(chǎn)品開發(fā)團隊基于該仿真平臺快速構建從芯片核心架構
    的頭像 發(fā)表于 03-19 14:36 ?553次閱讀

    MediaTek與NVIDIA攜手設計GB10 Grace Blackwell超級芯片

    MediaTek與NVIDIA近日宣布了一項重要合作,雙方將共同設計NVIDIA GB10 Grace Blackwell超級芯片。這款超級芯片將被應用于NVIDIA的個人AI超級計算機
    的頭像 發(fā)表于 01-13 10:48 ?469次閱讀

    MediaTek與NVIDIA攜手打造GB10 Grace Blackwell超級芯片

    MediaTek近日正式宣布與NVIDIA攜手合作,共同設計NVIDIA GB10 Grace Blackwell超級芯片。這款芯片將被應用于NVIDIA的個人AI超級計算機——NVIDIA
    的頭像 發(fā)表于 01-08 15:32 ?677次閱讀

    今日看點丨蘋果與富士康接洽,商討在中國臺灣生產(chǎn)AI服務器;英偉達正在開發(fā)一款基于ARM架構的新型CPU

    1. 英偉達正在開發(fā)一款基于ARM 架構的新型CPU ? 據(jù)報道,英偉達正在開發(fā)一款基于ARM架構的新型CPU。之前業(yè)界就有關于英偉達ARM PC
    發(fā)表于 11-08 10:47 ?874次閱讀

    《算力芯片 高性能 CPUGPUNPU 微架構分析》第二篇閱讀心得:芯片拓撲學:并行擴展與CPU設計的巨頭對決

    1 芯片拓撲結構:多核互聯(lián)的藝術 繼續(xù)深入《算力芯片》一書,第5-6章探討了芯片拓撲結構與經(jīng)典CPU芯片
    發(fā)表于 10-29 01:48

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構分析」閱讀體驗】--了解算力芯片CPU

    Computing)拓撲是一種特殊的 CPU設計,其核心思想是將在儲器和運算器緊密地結合在一起,使得計算操作可以在存儲器中進行,從而大幅提高數(shù)據(jù)處理效率和性能。 通過章節(jié)學習,可以看到算力芯片從組成設計上來說知識點還是蠻多的,通過梳理學習,有了進一步的認識,對
    發(fā)表于 10-20 12:03

    《算力芯片 高性能 CPU/GPU/NPU 微架構分析》第1-4章閱讀心得——算力之巔:從基準測試到CPU架構的深度探索

    。這一方法突顯了現(xiàn)代超算的核心優(yōu)勢——并行計算能力。舉一個具體實例來說,天河二號采用了異構架構,集成了英特爾至強處理器和中國自主研發(fā)的申威眾核加速器。這種CPU與協(xié)處理器的結合不僅提升了整體計算性能
    發(fā)表于 10-19 01:21

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構分析」閱讀體驗】--全書概覽

    芯片UMA與NUMA 第6章 經(jīng)典算力 CPU 芯片解讀 6.1 申威處理器 6.2 富士通A64FX處理器 6.3 蘋果M1處理器 6.4 Ampere處理器 6.5 IBMPOW
    發(fā)表于 10-15 22:08

    FPGA芯片架構和資源有深入的理解,精通Verilog HDL、VHDL

    、計算機相關專業(yè),具有良好的專業(yè)基礎知識。 2.工作年限不限,有工作經(jīng)驗或優(yōu)秀應屆畢業(yè)生亦可。 3.對FPGA芯片架構和資源有深入的理解,精通Verilog HDL、VHDL編程語言,熟悉時序約束、時序分析
    發(fā)表于 09-15 15:23

    名單公布!【書籍評測活動NO.43】 算力芯片 | 高性能 CPU/GPU/NPU 微架構分析

    社會資源和資本力量關注算力芯片的發(fā)展,希望我們的國家能夠更獨立自主地設計制造高性能算力芯片。 內容簡介: 本書介紹了超級計算機算力和AI算力的異同,從CPU流水線開始,描述主要的眾核處理器架構
    發(fā)表于 09-02 10:09

    自動駕駛三大主流芯片架構分析

    當前主流的AI芯片主要分為三類,GPU、FPGA、ASIC。GPU、FPGA均是前期較為成熟的芯片架構,屬于通用型芯片。ASIC屬于為AI特定場景定制的
    的頭像 發(fā)表于 08-19 17:11 ?2207次閱讀
    自動駕駛三大主流<b class='flag-5'>芯片</b><b class='flag-5'>架構</b>分析

    解讀MIPI A-PHY與車載Serdes芯片技術與測試

    上一期,《汽車芯片標準體系建設指南》技術解讀與功率芯片測量概覽中,我們給大家介紹了工信部印發(fā)的《汽車芯片標準體系建設指南》涉及到的重點芯片
    的頭像 發(fā)表于 07-24 10:14 ?4035次閱讀
    <b class='flag-5'>解讀</b>MIPI A-PHY與車載Serdes<b class='flag-5'>芯片</b>技術與測試