女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

浪潮信息趙帥:開放計算創新 應對Scaling Law挑戰

全球TMT ? 來源:全球TMT ? 作者:全球TMT ? 2024-08-15 16:02 ? 次閱讀

北京2024年8月15日/美通社/ -- 日前在2024開放計算中國峰會上,浪潮信息服務器產品線總經理趙帥表示,智能時代,開源模型和開放計算激發了人工智能產業生態的創新活力,面對大模型Scaling Law帶來的AI基礎設施Scale up和Scale out的挑戰,數據中心需要以開放創新加速算力系統、管理和基礎設施的全向Scale進程,推動AI產業的創新發展。

wKgaoma9th6AVbJVAAC1lErw8VU701.jpg


開源開放推動人工智能創新與算力生態的全面發展

生成式人工智能的飛躍式進步正在加速智能時代的到來,數據中心基礎設施面臨全方位創新,將越來越依賴更加廣泛的全球化開放協作,加速AI技術創新與應用,共同構建一個充滿創新活力的智能世界,而激發人工智能創新活力,開源開放是核心和源泉。

模型開源激發人工智能創新活力。隨著開源大模型能力的不斷增強和開源生態的持續壯大,帶動模型、應用到產業的全面發展,三分之二的基礎模型選擇開源,超過80%以上的AI項目使用開源框架進行開發,開源模型的下載量突破3億次,并衍生出超過 3萬個新模型,Llama 3.1、通義千問、源2.0等開源大模型成為人工智能創新的驅動力。

硬件開放完善人工智能算力生態。人工智能帶來指數級增長的算力需求,全球已有上百家公司投入新型AI芯片的研發與設計,百花齊放的算力芯片需要統一的算力平臺才能快速推向市場,實現落地。開放加速規范OAM的出現大大加速多元算力芯片的適配兼容過程,大幅降低資源投入,使算力部署和迭代提速,支撐上層大模型和AIGC應用的快速迭代成熟。目前,90% 高端AI芯片基于OAM規范設計,去年浪潮信息剛剛發布的基于OAM規范的開放加速計算平臺NF5698G7與多款主流AI加速芯片適配兼容,基于OAM的智算產業生態圈日趨完善。

我們可以看到,AI時代,算力正在呈現出多元化的發展趨勢。為應對AIGC、云計算、大數據等應用復雜且不斷變化的計算需求,不僅僅是GPUCPUFPGAASIC等芯片也在朝著更加多樣化和專用化的方向發展。而且無論是手機電腦、邊緣設備、CPU通用服務器、加速服務器都具有了AI計算的能力,可以說一切計算皆AI,AI算力已經深入到千行百業,滲透進每一個計算設備里。面向人工智能的算力范式不斷革新,基于CPU的通用服務器不僅要承載大數據、關鍵計算、科學計算外,也要承擔AI應用的重要任務,這也是CPU通用服務器的重大機遇。

但隨著應用范式的多樣化,目前x86、ARMRISC-V等不同架構的CPU處理器百花齊放,僅中國,就有10多種CPU處理器,不同CPU協議標準不統一,同時為了更好的適合AI推理高并行的計算特點,CPU總線互聯帶寬、內存帶寬及容量也需要特別優化,使得系統功耗、總線速率、電流密度不斷提升……多種因素疊加之下,硬件開發、固件適配、部件測試資源等時間激增,給算力系統設計帶來巨大挑戰。

為了縮短從芯片到算力系統的轉化時間,給用戶提供更快、更好的算力支撐,CPU端也亟需構建智算時代的CPU統一底座, 能夠兼容不同芯片廠商、多代產品。2024開放計算中國峰會上,開放算力模組(OCM)規范正式啟動,首批成員包括中國電子標準院、百度、小紅書、浪潮信息、聯想、超聚變、英特爾AMD等機構和企業。

wKgZoma9th-AL50sAADMAXcn7K4485.jpg


全新的開放算力模組OCM規范,旨在建立基于處理器的標準化算力模組單元,通過統一不同處理器算力單元對外高速互連、管理協議、供電接口等,實現服務器主板平臺的深度解耦和模塊化設計,兼容不同架構的多代處理器芯片,方便客戶根據人工智能、云計算、大數據等多樣化應用場景,靈活、快速匹配最適合的算力平臺,推動算力產業高質量快速發展。

OCM規范是國內首個服務器計算模組設計規范,產業界上下游伙伴將基于OCM規范,共同建立標準化的算力模組單元,構建開放合作、融合創新的產業生態,為用戶提供更多通用性強、綠色高效、安全可靠的算力選擇。

以開放創新的全向Scale應對大模型第一性原理

算力、算法和數據是推動人工智能發展的三駕馬車,自Transformer架構出現以來,大模型性能與其參數量、計算當量、數據量的協同作用尤為顯著,業界稱之為大語言模型的第一性原理——Scaling Law。

智算時代,需要用開放的理念來加速算力系統全向Scale,從而應對大模型的Scaling Law。隨著大模型能力的持續進化,算法規模和復雜性不斷增加、數據量越來越大,算力需求也在不斷攀升,需要同時應對單系統性能提升Scale up與多系統大規模擴展Scale out兩個方向擴展的挑戰,對數據中心基礎設施、算力管理、迭代升級等都提出了更高要求。

wKgaoma9th-AbzXlAABtwq38_7g324.jpg

在算力方面,智算中心需要同時應對兩個方向的擴展,分別是強算力支持、一機多芯、多元多模的單機系統Scale up要求和大規模AI組網、高帶寬、資源池化的大規模化擴展Scale out要求,以開放加速模組和開放網絡實現算力的Scale。UBB2.0開放標準支持更高算力規格的加速卡、可以實現更大的OAM domain互聯,未來可以支持8000+ 張加速卡Scale up,突破大模型All to All通信過程中的互聯瓶頸。同時,大模型的發展需要更大規模的算力系統,浪潮信息開放網絡交換機可實現16000+個計算節點10萬+加速卡的Scale out組網,滿足加速卡之間的互聯通信需求,帶寬利用率高達95%+。

在管理方面,需要解決跨平臺適配、模塊化架構、快速迭代的Scale要求,以開放的固件解決方案實現了管理的Scale。當前,異構算力多元分化,異步迭代,管理接口規范各不相同,導致固件平臺分支版本龐大,相互割裂,無法歸一,單一企業資源在維護和適配如此眾多的分支版本方面捉襟見肘。為解決一系列管理挑戰,需要依托于開源社區的開源固件平臺,構建原生解耦架構提升可擴展性,建立統一標準的接口規范,支持用戶對于自主模塊進行定制化,實現標準接口規范下的異步、自主定制迭代,以滿足智算時代的算力迭代需求。

在基礎設施方面,數據中心面臨智能算力擴展的兩大Scale挑戰:一是GPU、CPU算力提升,單芯片單卡功耗急劇增加,單機柜在供電和制冷上面臨著Scale up支撐挑戰;同時,Scaling Law驅動GPU規模無限膨脹,達到萬卡、十萬卡級別,帶來了數據中心層級Scale out的支撐挑戰,需要開放標準和開放生態將實現基礎實施的Scale,滿足快速建設、高算力/高能耗支撐要求。采用開放標準、開放生態構建的數據中心基礎設施,能更好地匹配智算時代多元、異構算力的擴展和迭代速度,進而支撐上層智能應用的進一步普及。以浪潮信息為例,基于開放標準推出的液冷冷板組件,支撐單機系統內GPU和CPU核心算力原件Scale up擴展;推出模塊化、標準接口的120kw機柜,兼容液冷、風冷場景,支撐柜內更大的部署需求;推出基于開放標準的預制化集裝箱數據中心,大幅壓縮建設周期,其擴展性很好的滿足了AI算力系統的Scale需要。

開放計算為數據中心的全向Scale,提供了一個可以迅速傳遞到整個產業鏈的"通道"。目前,開放加速模組和開放網絡實現了算力的Scale,開放固件解決方案實現了管理的Scale,開放標準和開放生態實現了基礎設施的Scale。開放計算對于智算時代至關重要,需要用開放應對多元算力,用開放促進算力的Scale,基于開放創新構建的全向Scale能力將會成為未來AI基礎設施的核心驅動力,加速智算時代的創新,加速人工智能的前行。

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    13

    文章

    9685

    瀏覽量

    87276
  • 浪潮
    +關注

    關注

    1

    文章

    474

    瀏覽量

    24492
  • AI
    AI
    +關注

    關注

    87

    文章

    34197

    瀏覽量

    275347
  • 人工智能
    +關注

    關注

    1804

    文章

    48701

    瀏覽量

    246454
  • 大模型
    +關注

    關注

    2

    文章

    3025

    瀏覽量

    3824
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    天瞳威視與浪潮信息達成戰略合作,推進高階智駕車載計算系統創新

    北京2025年3月22日?/美通社/ -- 近日,蘇州天瞳威視電子科技有限公司與浪潮信息旗下蘇州元腦智能科技有限公司達成戰略合作協議。此次合作依托浪潮信息提供的車載算力平臺硬件系統、底層軟件環境
    的頭像 發表于 03-27 16:55 ?260次閱讀
    天瞳威視與<b class='flag-5'>浪潮信息</b>達成戰略合作,推進高階智駕車載<b class='flag-5'>計算</b>系統<b class='flag-5'>創新</b>

    浪潮信息存儲SATA SSD:技術創新引領數據存儲新時代

    在智慧時代,數據存儲需求日益增長,對存儲產品的性能和穩定性提出了更高要求。浪潮信息存儲,作為行業內的佼佼者,積極響應市場需求,通過自主研發,不斷積累技術優勢,致力于為用戶提供高性能、高穩定性的存儲
    的頭像 發表于 02-07 13:41 ?538次閱讀

    浪潮信息存儲SATA SSD:以技術創新,開啟數據存儲新篇章

    計算平臺以及個人用戶的數字化需求,迫切需要高效、可靠的存儲解決方案。 浪潮信息存儲積極響應市場需求,通過自主研發不斷積累技術優勢,推出了SATA、NVMe、雙端口、ZNS等全系列存儲產品。近期,浪潮信息自研SATA SSD新品—
    的頭像 發表于 01-24 10:02 ?382次閱讀

    浪潮信息與智源研究院攜手共建大模型多元算力生態

    近日,浪潮信息與北京智源人工智能研究院正式簽署戰略合作協議,雙方將緊密合作,共同構建大模型多元算力開源創新生態。 此次合作旨在提升大模型創新研發的算力效率,降低大模型應用開發的算力門檻,推動
    的頭像 發表于 12-31 11:49 ?536次閱讀

    浪潮信息剖析智能時代數據存儲領域面臨的挑戰與機遇

    在當今數字化時代,算力與存力的協同增長已成為驅動各行各業發展的關鍵力量。特別是在人工智能(AI)這一前沿領域,隨著數據量的爆炸式增長,對存儲系統的需求日益復雜和多樣。近期,在首屆CCF中國存儲大會上,浪潮信息存儲首席架構師孫斌深刻剖析了智能時代數據存儲領域面臨的挑戰與機遇
    的頭像 發表于 12-30 09:43 ?668次閱讀

    浪潮信息與智源研究院達成戰略合作協議

    近日,浪潮信息與智源研究院達成戰略合作協議,雙方將緊密協作共建大模型多元算力開源創新生態,提升大模型創新研發的算力效率,降低大模型應用開發的算力門檻。目前,智源Triton算子庫FlagGems已
    的頭像 發表于 12-26 10:25 ?485次閱讀

    浪潮信息與17家元腦伙伴共簽億級分銷協議

    。 此次簽約標志著浪潮信息與這些元腦伙伴將在產品技術創新、市場拓展及解決方案等多個領域展開深入合作。雙方將充分發揮各自優勢,共同推動技術革新,加速智能化轉型的步伐,為千行百業的數字化轉型注入強勁動力。 浪潮信息作為國內領先
    的頭像 發表于 12-25 15:46 ?657次閱讀

    浪潮信息AI存儲性能測試的領先之道

    MLCommons,一個致力于推動全球 AI系統發展的頂級工程聯盟,匯聚了包括谷歌、斯坦福大學在內的眾多頂尖企業和研究機構。作為該聯盟的創始成員之一,浪潮信息自2020年起便積極參與其中,共同探索
    的頭像 發表于 10-29 16:30 ?569次閱讀
    <b class='flag-5'>浪潮信息</b>AI存儲性能測試的領先之道

    浪潮信息:元腦企智EPAI助力金融大模型快速落地

    近日,2024金融科技應用創新發展大會暨農村金融機構信息化發展創新座談會在上海舉辦。浪潮信息推出元腦企智EPAI企業大模型開發平臺,面向金融業務場景,實現7天完成POC驗證、2個月上線
    的頭像 發表于 09-20 16:07 ?628次閱讀
    <b class='flag-5'>浪潮信息</b>:元腦企智EPAI助力金融大模型快速落地

    33家元腦區域伙伴與浪潮信息簽署戰略合作協議

    近日,2024年浪潮信息區域ISP伙伴戰略簽約儀式圓滿落幕,標志著浪潮信息在人工智能領域的合作版圖再度擴大。此次盛會匯聚了全國范圍內33家實力雄厚的億級及千萬級元腦區域伙伴,共同簽署戰略合作協議,攜手開啟AI應用新篇章。
    的頭像 發表于 08-14 16:25 ?679次閱讀

    澎湃認證:浪潮信息集中式存儲攜手長擎安全操作系統24完成兼容性認證

    /AS系列產品完全兼容,滿足功能需求,系統運行可靠穩定,性能表現優異。 ? ? 浪潮信息澎湃技術認證是浪潮信息基于自身多元、創新的通用計算平臺,與供應鏈及軟件服務等生態合作伙伴共同構建
    的頭像 發表于 07-19 13:53 ?467次閱讀
    澎湃認證:<b class='flag-5'>浪潮信息</b>集中式存儲攜手長擎安全操作系統24完成兼容性認證

    浪潮信息推出AIGC存儲解決方案

    近日,在科技創新浪潮中,浪潮信息成功舉辦了“元腦中國行”全國巡展的杭州站活動,此次盛會不僅匯聚了業界的精英與目光,更見證了浪潮信息在AIGC(人工智能生成內容)領域的一次重大突破。會
    的頭像 發表于 07-03 11:16 ?1069次閱讀

    浪潮信息元腦?服務器率先支持英特爾?至強?6處理器

    北京2024年6月7日?/美通社/ -- 6月6日,英特爾在全球范圍內發布了英特爾?至強?6處理器,浪潮信息服務器產品線總經理受邀參會并發表演講。會上,浪潮信息多款元腦服務器
    的頭像 發表于 06-07 15:36 ?613次閱讀
    <b class='flag-5'>浪潮信息</b>元腦?服務器率先支持英特爾?至強?6處理器

    CCF-TCIST走進浪潮信息 共話AI時代存儲創新

    CCF信息存儲技術專委會走進浪潮信息 共話大模型時代的存儲創新之道 北京2024年6月7日?/美通社/ -- 近日,中國計算機學會信息存儲技
    的頭像 發表于 06-07 14:27 ?459次閱讀
    CCF-TCIST走進<b class='flag-5'>浪潮信息</b> 共話AI時代存儲<b class='flag-5'>創新</b>

    浪潮信息重磅發布“源2.0-M32”開源大模型

    浪潮信息近日發布了一款全新的開源大模型——“源2.0-M32”。這款大模型在“源2.0”系列大模型的基礎上,進行了深度的技術創新與升級。
    的頭像 發表于 06-05 14:50 ?1008次閱讀