女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

華中科大馮丹教授:加速數據中心向Diskless架構演進,近數據處理新型盤框技術創新發力

章鷹觀察 ? 來源:電子發燒友原創 ? 作者:章鷹 ? 2023-04-23 17:41 ? 次閱讀
(電子發燒友網報道 文/章鷹)“我們把計算中心分為三大塊,計算、傳輸和存儲。但是當前數據中心存算分離不徹底,導致計算和存儲分別還有大量的冗余空間。比如計算器、存儲服務器都有配置相應的硬盤,通過計算服務器的硬盤做緩存,將存儲域的數據拉到計算這塊進行處理,導致我們配備最大容量的配置,導致存儲資源的浪費;另外一方面,采用通用的算力進行處理,使得IO的處理在計算域這一側采用CPU來做網絡和讀寫的操作,需要消耗30%的算力,而在存儲域采用通用CPU做控制器,使得性能降低20%?!比A中科技大學計算機科學與技術學院院長馮丹表示點出當前數據中心存儲領域的痛點問題。


圖:華中科技大學計算機科學與技術學院院長 馮丹

4月20日,在中國深圳舉辦的華為分析師大會分論壇上,長江學者特聘教授、華中科技大學計算機科學與技術學院院長馮丹對數據中心Diskless架構及近數據處理發展趨勢做出了權威解讀。

馮丹指出,傳統存算融合架構下,企業通常采用應用與本地盤耦合的服務器一體化架構,存在存力效率低、無效數據遷移、資源浪費等典型問題。表現為:一、數據從盤到計算域CPU,需要8次以上數據搬遷,無效搬遷帶來了網絡和算力資源的浪費;二、在存算融合的上千節點大規模集群中,算力、容量空間配比無法均衡,擴容時需要額外遷移數據,不僅帶來現有業務風險,還會浪費投資;三、數據爆發增長,面向結構化數據的數據縮減策略不完全適用于非結構化場景。

國際調研機構IDC的數據顯示,2025年數據量將達到175ZB,積累的數據量90%主要來自于近兩年,大部分數據來自金融、基因、分子、動力、IoT等等,從結構化到非結構化大量數據的產生,使得對容量、成本的壓力越來越大。但是傳統的面向結構化數據的數據壓縮方法,可以使壓縮比達到3:1,但是對于非結構化數據,壓縮比小于2,甚至是無效的。如何在存儲域實現對于用戶來說,透明的、高效、自適應的數據縮減算法也成為一個難題。

隨著算力多樣化、高性能網絡和存儲介質的發展,數據中心架構從以CPU中心朝著以數據為中心的Diskless架構演進。Diskless架構下,單一CPU算力發展到GPU、DPU、XPU等多樣算力,算力效率得以充分發揮;網絡從IP、NOF發展到高通量的CXL,為算力和存力等硬件解耦奠定了基礎;存力也從傳統HDD到SSD,性能、功耗實現全面提升。Intel、華為、KIOXIA、阿里云等業界芯片、存儲、云和互聯網廠商的積極推進下,Diskless架構借助專用DPU/IPU等數據處理芯片和OceanDisk等專用存儲模塊,進一步提升數據處理和存儲的效能,充分調動數據中心資源。

馮丹教授表示,資源池化共享的Diskless架構應具備以下關鍵技術:

1、網存協同,DPU硬件卸載加速,數據高效協同處理。通過DPU等專有數據處理模塊,使服務器CPU全為應用服務,基礎設施與應用任務解耦,將VirtIO、NVMe-oF等CPU計算效率低任務轉移到DPU的專用加速器執行,實現資源彈性擴展。

2、數控分離+IO直通,實現控制流與IO流分離,IO直通到存儲介質,進一步提升存儲效率。通過數控分離,可達到極致IO訪問時延,通過存儲域IO讀寫數據流與IO控制處理的分離,使得讀寫IO直通到存儲介質中,減少IO處理路徑,降低處理復雜度,極大提升存儲域訪問性能。計算域則可以借助DPUbypassCPU,減少數據拷貝開銷,提升IO訪問性能。

3、盤控協同,盤芯片與控制器芯片配合,提升集成度,達到最佳成本和能耗。盤控協同技術的關鍵是要實現高性能、低成本的大盤,通過硬件對盤控系統內的算法進行加速,比如利用FPGA實現FTL/DIF/在線壓縮/加密/EC/GC等硬化,提升性能;盤內和框內的各類驅動和緩存層合一,實現盤框一體,構建極致成本和能耗的大盤存儲。

4、算子卸載,EC、數據縮減等算法通過硬件卸載到存儲端,實現近數據處理。通過計算語義的卸載,存儲直出語義接口,主機側軟件棧打薄,減少80%的IO交互次數,實現對整系統

的CPU和網絡帶寬節省。同時,在大數據/數據倉庫場景,可以利用引擎的下推接口,下推謂詞和投影等運算操作到存儲資源池,減少無效數據的搬移。

華為去年發布的OceanDisk智能盤框產品,是一個標準的大存力新型盤框產品。OceanDisk通過NoF+高速網絡連接Diskless服務器,實現計算和存儲獨立彈性擴展,幫助客戶提高資源利用率,機柜空間和設備功耗分別降低40%;內置FlashLink?智能盤框協同算法等軟硬結合技術,帶來最大250萬IOPS,50GB/s帶寬的高性能;依托華為多年存儲研發實力,OceanDisk智能盤框提供硬盤亞健康管理、智能慢盤優化等技術,保持大規模數據中心10萬級硬盤的性能穩定,大幅降低運維難度。OceanDisk作為業界首個面向Diskless架構的新型盤框,將以高性能、高可靠、綠色集約重新定義下一代云和互聯網數據中心存儲架構。

馮丹教授表示:“從技術趨勢來看,高性能異構算力、高速網絡、大存力新型盤框、算子卸載等技術的發展,帶來了數據中心架構的變革,加速了以CPU為中心的耦合架構走向徹底存算分離、資源池化共享的以數據為中心的Diskless架構,這種架構進一步簡化了數據中心基礎設施構建,能夠實現存力和算力資源的集約高效發展,已經成為大規模數據中心發展的重要技術趨勢?!?br />
本文由電子發燒友原創,轉載請注明以上來源。微信號zy1052625525。需入群交流,請添加微信elecfans999,投稿爆料采訪需求,請發郵箱[email protected]。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 華為
    +關注

    關注

    216

    文章

    35026

    瀏覽量

    255051
  • intel
    +關注

    關注

    19

    文章

    3493

    瀏覽量

    187962
  • 數據中心
    +關注

    關注

    16

    文章

    5139

    瀏覽量

    73196
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    適用于數據中心和AI時代的800G網絡

    隨著人工智能(AI)技術的迅猛發展,數據中心面臨著前所未有的計算和網絡壓力。從大語言模型(LLM)訓練到生成式AI應用,海量數據處理需求推動了網絡帶寬的快速增長。在此背景下,800G網絡技術
    發表于 03-25 17:35

    華為全新升級星河AI數據中心網絡

    在華為中國合作伙伴大會2025期間,以 “星河AI數據中心網絡,賦AI時代新動能”為主題的數據中心網絡分論壇圓滿落幕。本次論壇匯聚了來自全國的300多位客戶和伙伴,共同探討數據中心網絡的發展趨勢與
    的頭像 發表于 03-24 14:46 ?365次閱讀

    優化800G數據中心:高速線纜、有源光纜和光纖跳線解決方案

    隨著技術的飛速發展,數據中心正在從100G和400G演進到800G時代,對高速數據傳輸的需求與日俱增。因此,選擇高效且可靠的布線解決方案對于800G
    發表于 03-24 14:20

    施耐德電氣即將亮相2025中國數據中心液冷技術大會

    以“液冷深融合”為主題,由CDCC與益企研究院共同主辦的第三屆中國數據中心液冷技術大會即將召開。會上將匯集多方數據中心行業的資深專家、研究學者與技術大咖,就
    的頭像 發表于 03-21 16:47 ?1562次閱讀

    Solidigm高密度方案解決數據中心存儲難題,賦能AI創新發

    QLC在內的豐富產品組合,打破從數據中心到邊緣應用面臨的存儲瓶頸,提升人工智能效率,釋放人工智能潛能。 當AI的發展突破界限,算與存的天平被重新校準。在AI 浪潮下,傳統HDD存儲方案的局限性開始凸顯:性能瓶頸制約
    的頭像 發表于 03-13 15:36 ?425次閱讀

    維諦技術:如何讓貴州醫科大數據中心遷移0業務影響?

    搬家是什么感覺?麻煩,累,折騰……而且稍不留神就會丟三落四。普通人搬家尚且如此,那數據中心“搬家”會更讓人崩潰,過程會涉及大量設備、重要數據和核心資產的轉移。貴州醫科大學就經歷了這樣的大場面
    的頭像 發表于 12-18 15:20 ?417次閱讀
    維諦<b class='flag-5'>技術</b>:如何讓貴州醫<b class='flag-5'>科大</b>學<b class='flag-5'>數據中心</b>遷移0業務影響?

    華為數據中心能源榮膺W.Media 2024技術領袖獎

    近日,W.Media 2024亞太云和數據中心頒獎晚宴在新加坡舉辦,華為數據中心能源憑借卓越的技術領導和廣泛的市場影響,榮獲“
    的頭像 發表于 12-09 09:51 ?513次閱讀

    NIDA發布《智算數據中心網絡建設技術要求》

    Alliance,以下簡稱 “NIDA”)攜手中國信息通信研究院等9家組織成員共同發布了《智算數據中心網絡建設技術要求》(以下簡稱 “技術要求”)。該技術要求明確了智算場景下
    的頭像 發表于 12-04 11:13 ?747次閱讀

    電力模塊如何在數據中心建設中創新使用?為設計提供思路

    高密化、規?;陌l展,供電系統作為數據中心的“心臟”,為滿足數據中心的增長,以及綠色能源的發展趨勢,在建設中不僅要保障供電的安全性,更要對供電系統進行技術創新,為客戶創造更大價值。結合相關技術
    的頭像 發表于 11-26 14:33 ?939次閱讀
    電力模塊如何在<b class='flag-5'>數據中心</b>建設中<b class='flag-5'>創新</b>使用?為設計提供思路

    速看!Atlassian云版與數據中心版的創新進展

    數據中心
    龍智DevSecOps
    發布于 :2024年11月22日 17:29:05

    面向未來數據中心的存儲平臺技術挑戰與探索

    教授,華中科技大學金海教授,清華大學舒繼武教授,李輝等20余位專家出席會議。秀湖會議學術委員會主席、CCF副理事長、清華大學胡事民教授在開幕
    的頭像 發表于 11-06 10:43 ?534次閱讀

    如何選擇數據中心服務

    的規模、所需的服務類型(如托管服務、云服務、存儲服務等)、數據處理和存儲的需求、安全性要求以及預算等。這些需求將直接影響選擇數據中心服務的方向和重點。 二、考察數據中心的位置 數據中心
    的頭像 發表于 10-24 16:14 ?481次閱讀

    當今數據中心技術趨勢

    計算 數據中心的首要趨勢是追求更高的效能和性能。隨著數字化轉型的深入推進,各行業對數據中心處理能力和存儲容量提出了更高要求。為了滿足這些需求,數據中心正不斷引入新
    的頭像 發表于 10-24 15:15 ?837次閱讀

    簡述數據中心網絡架構的演變

    隨著全球對人工智能(AI)的需求不斷增長,數據中心作為AI計算的重要基礎設施,其網絡架構與連接技術的發展變得尤為關鍵。
    的頭像 發表于 10-22 16:23 ?688次閱讀

    人工智能數據中心新型連接解決方案

    支持新型人工智能數據中心架構的先進連接解決方案不斷涌現。高速板對板連接器、下一代電纜、背板和近似集成電路連接器對電纜解決方案的運行速度高達224Gb/s-PAM4,將加速未來計算的發展
    的頭像 發表于 06-13 08:26 ?961次閱讀
    人工智能<b class='flag-5'>數據中心</b>的<b class='flag-5'>新型</b>連接解決方案