女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

芯科技,解密ChatGPT暢聊之算力芯片

是德科技KEYSIGHT ? 來源:未知 ? 2023-12-27 07:45 ? 次閱讀

在今日飛速發(fā)展的科技浪潮中,OpenAI的ChatGPT如一顆璀璨明星,引領著智能對話的新潮流。ChatGPT不僅是一款聊天機器人程序,它背后的驅動力是一個龐大而復雜的算力網絡。這個網絡依賴于先進的GPU服務器,尤其是英偉達的A100 GPU,提供了強大而精確的計算能力。ChatGPT的功能遠超日常對話,它能夠學習、理解并生成人類般的文本,是人工智能領域的一個重要突破。但其真正力量的源泉,是背后那些不斷工作的算力芯片,它們讓ChatGPT能夠實時響應和進化,成為我們生活和工作中的得力助手。

本期是“芯科技”欄目第一期,文末有驚喜,千萬別錯過!

作為OpenAI研發(fā)的聊天機器人程序,支撐ChatGPT運轉的可不是簡單的一臺機器,而是一個龐大的算力網絡。這個算力網絡可以抽象為三層:傳輸網絡、計算網絡和存儲網絡。如下圖:

wKgZomWLZrKAA38rAAHaga7MSPs531.png

圖:算力網絡示意圖

當前,大部分算力網絡所采用的是GPU服務器,并廣泛使用英偉達A100 GPU。A100 GPU屬于算力芯片的一種,類型是GPGPU,此外還有專用的ASIC,比如NPU、VPU和TPU等,以及傳統(tǒng)的CPUFPGA等。我們通過下面這張圖能夠比較直觀地看到GPGPU在性能、算法精度、通用性等方面的優(yōu)勢。

算力芯片對比

指標

GPGPU

CPU

FPGA

ASIC

算力性能

極低

較高

芯片成本

較高

系統(tǒng)成本

功耗

能效比

極低

通用性

算力精度

豐富

單一

單一

單一

算法適配

豐富

單一

單一

單一

數據并行能力

適用場景

云端訓練和推理

任務調度類

云邊端推理

云邊端訓練和推理

圖:算力芯片分類

綜合而言,GPGPU是一款算力性能高,算力類型豐富,算法框架適配完全,數據并行能力強的算力芯片,更加適合當前多模態(tài)AI模型的發(fā)展。

在算力網絡中,GPGPU芯片要發(fā)揮性能光靠自己可不行,需要系統(tǒng)的配合。在這個系統(tǒng)內:CPU負責任務調度;GPU負責主要的算力輸出,也就是計算任務;內存負責數據暫存,配合GPU進行計算。

wKgZomWLZrKAMmUUAAXO92vc_Ko414.png

圖:算力網絡芯片分工示意圖

為了提升計算效率,減少數據傳輸的延時,英偉達A100在芯片封裝內搭載了HBM內存,其具有傳輸距離近,速度帶寬高,堆疊容量大的優(yōu)勢。

wKgZomWLZrOAWncQAAPS3eFl3OM467.png

圖:HBM內存,示意圖

HBM這種芯片封裝內搭載內存的方式,成本是比較高的,因此大部分AI服務器選擇將計算芯片和內存分開,為了提升這種方式下內存的傳輸速度,內存標準也在不斷演進,已經迭代到DDR5。

wKgZomWLZrOAB72rAAK802-g8kw934.png

圖:內存技術發(fā)展

內存的發(fā)展趨勢是速度更快、尺寸更小、功耗更低。為了保障內存的高性能和穩(wěn)定性,在測試環(huán)節(jié),需要進行各種功能、性能和可靠性等方面測試,其中需要用到高速誤碼儀,示波器,協(xié)議分析儀,一致性分析軟件等軟硬件組合,如下圖:

wKgZomWLZrOATm9oAARdZyO2bdI224.png

圖:是德科技DDR5測試拓撲圖

是德科技,對算力芯片,總線技術PCIe/CXL,存儲技術DDR/LPDDR等都有完整的解決方案,更多有關算力芯片測試,請參考文章下載鏈接:

點擊注冊

作為是德科技 “芯科技” 系列第一期,我們特意為大家準備了精美的禮品抽獎,也歡迎大家留言,把你想學習的知識,你和是德科技的故事,一起告訴小編!


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 是德科技
    +關注

    關注

    21

    文章

    984

    瀏覽量

    83237

原文標題:芯科技,解密ChatGPT暢聊之算力芯片

文章出處:【微信號:是德科技KEYSIGHT,微信公眾號:是德科技KEYSIGHT】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    芯片的生態(tài)突圍與革命

    電子發(fā)燒友網報道(文 / 李彎彎)大芯片,即具備強大計算能力的集成電路芯片,主要應用于高性能計算(HPC)、人工智能(AI)、數據中心、自動駕駛等需要海量數據并行計算的場景。隨著
    的頭像 發(fā)表于 04-13 00:02 ?1493次閱讀

    DeepSeek對芯片的影響

    DeepSeek模型,尤其是其基于MOE(混合專家)架構的DeepSeek-V3,對芯片的要求產生了深遠影響。為了更好地理解這一影響,我們可以從幾個方面進行分析。一.MOE架構對
    的頭像 發(fā)表于 02-07 10:02 ?996次閱讀
    DeepSeek對<b class='flag-5'>芯片</b><b class='flag-5'>算</b><b class='flag-5'>力</b>的影響

    為企業(yè)量身定制解決方案

    面對智產業(yè)發(fā)展趨勢,寧在2024年世界互聯(lián)網大會上,正式提出“精裝”概念,希望為智基礎設施的建設與運維、乃至智算算
    的頭像 發(fā)表于 01-23 16:21 ?707次閱讀

    中心的如何衡量?

    作為當下科技發(fā)展的重要基礎設施,其的衡量關乎其能否高效支撐人工智能、大數據分析等智能應用的運行。以下是對智中心算衡量的詳細闡述:一、
    的頭像 發(fā)表于 01-16 14:03 ?1901次閱讀
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    科技云報到:要更要“利”,“精裝”觸發(fā)大模型產業(yè)新變局?

    科技云報到:要更要“利”,“精裝”觸發(fā)大模型產業(yè)新變局?
    的頭像 發(fā)表于 01-16 10:24 ?381次閱讀

    澎峰科技助力中國移動 重磅發(fā)布智合”原生基礎軟件棧2.0

    原生基礎軟件棧2.0。 芯片是智生態(tài)的基石,基礎軟件棧是智生態(tài)的核心。澎峰科技憑借在高性能計算庫和跨架構領域的深厚積累,自
    的頭像 發(fā)表于 12-03 15:08 ?636次閱讀
    澎峰科技助力中國移動 重磅發(fā)布智<b class='flag-5'>算</b>“<b class='flag-5'>芯</b>合”<b class='flag-5'>算</b><b class='flag-5'>力</b>原生基礎軟件棧2.0

    助推智中心發(fā)展邁入新階段

    在“全局智”戰(zhàn)略下,寧正式發(fā)布“全棧全液”AI基礎設施方案 ,在業(yè)內首先實現(xiàn)了“全棧全液”的智中心建設能力,助推智中心發(fā)展邁入新階段。
    的頭像 發(fā)表于 11-07 11:18 ?536次閱讀

    一體架構創(chuàng)新助力國產大AI芯片騰飛

    在灣展SEMiBAY2024《AI芯片與高性能計算(HPC)應用論壇》上,億鑄科技高級副總裁徐芳發(fā)表了題為《存一體架構創(chuàng)新助力國產大
    的頭像 發(fā)表于 10-23 14:48 ?769次閱讀

    【「芯片 | 高性能 CPU/GPU/NPU 微架構分析」閱讀體驗】--全書概覽

    本帖最后由 1653149838.791300 于 2024-10-16 22:19 編輯 感謝平臺提供的書籍,厚厚的一本,很有分量,感謝作者的傾力付出成書。 本書主要講芯片CPU
    發(fā)表于 10-15 22:08

    名單公布!【書籍評測活動NO.43】 芯片 | 高性能 CPU/GPU/NPU 微架構分析

    試用評測資格! 前言 不知不覺中,我們來到一個計算機科學飛速發(fā)展的時代,手機和計算機中各類便捷的軟件已經融入日常生活,在此背景下,硬件特別是強勁的芯片,對于軟件服務起到不可替代的支撐作用。
    發(fā)表于 09-02 10:09

    淺析三大異同

    隨著一年多前ChatGPT的出現(xiàn)引爆人工智能(AI)浪潮,支撐大模型背后的“”概念突然闖進我們的視野,成為科技圈炙手可熱的新詞,引領著最新潮流。作為數字經濟時代新生產,也許不少人
    的頭像 發(fā)表于 08-30 12:56 ?1908次閱讀
    淺析三大<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>之</b>異同

    安謀科技異構組合,破局生成式AI挑戰(zhàn)

    近日,此科技集團有限公司(以下簡稱“此科技”)AI PC戰(zhàn)略暨首款芯片發(fā)布會在上海舉行,正式推出了其首款專為AI PC打造的異構高能效芯片產品——“此
    的頭像 發(fā)表于 08-13 09:12 ?840次閱讀

    安謀科技異構賦能AI計算,此科技首款AI PC芯片發(fā)布

    7月30日,此科技集團有限公司(以下簡稱“此科技”)AI PC戰(zhàn)略暨首款芯片發(fā)布會在上海舉行,正式推出了其首款專為AI PC打造的異構高能效芯片產品——“此
    發(fā)表于 07-31 14:36 ?1268次閱讀
    安謀科技異構<b class='flag-5'>算</b><b class='flag-5'>力</b>賦能AI計算,此<b class='flag-5'>芯</b>科技首款AI PC<b class='flag-5'>芯片</b>發(fā)布

    耀輝科技解讀高速互連對于AI和大芯片而言意味著什么?

    近年來,隨著人工智能技術的迅猛發(fā)展,大芯片已成為推動AI技術創(chuàng)新的關鍵力量。然而,隨著芯片內部計算單元數量的增加和任務復雜度的提升,互連已成為一個嚴重的瓶頸,制約著
    的頭像 發(fā)表于 07-08 11:39 ?1252次閱讀