女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

百度智能云以虛擬化塊存儲CDS打造云上多樣解決方案

高端存儲知識 ? 來源:高端存儲知識 ? 作者:高端存儲知識 ? 2020-09-24 15:38 ? 次閱讀

在數字經濟時代,海量的數據成為數字經濟的重要生產要素,特別是受今年疫情的影響,線下的生產和生活迅速的轉移到了線上,相應的數據也再次迎來了新一波快速增長。 對于百度智能云這樣的云服務商來說,海量的數據既是資產也是壓力,尤其是大量冷數據的產生讓存儲分層變得“迫在眉睫”。在此背景下,磁帶庫因性價比較高且能夠快速寫入,成為了百度智能云快速存檔冷數據的理想之選。

但在實際應用中,百度智能云發現磁帶庫雖然可以快速寫入數據,但數據首先需要在緩存盤上進行序列化,這就需要一款快速的緩存盤作為載體化解這一難題。基于此,百度智能云創新的引入了英特爾傲騰固態盤,借助其速度和耐用性兼備的特性,不僅大大提升了磁帶庫備份的速度,也滿足了歸檔存儲應用中繁重的讀/寫混合型工作負載的要求。 毫無疑問,百度智能云與英特爾的成功合作,不僅為數據歸檔和備份的優化和升級提供了重要的參考和借鑒方向,也讓更多的行業和用戶享受到了云存儲服務所帶來的好處,真正實現了冷數據在更長久周期內的可用性、可回溯性和可審計性。 冷數據帶來的挑戰 今天,海量數據的增長正在成為一種“新常態”,而保存和管理這些海量數據也變得日益困難,特別是把所有數據保存在同一個存儲介質中更是不切實際的。 因此,業內通常的做法是,將數據根據類型的不同劃分為三個分層,即熱數據、溫數據和冷數據。其中,最“冷”的數據十分適合存儲到磁帶庫這種價格便宜的長期存儲介質之中。

得益于光纖通道和串行連接 SCSISAS)等技術的發展,如今磁帶庫的順序讀寫性能也得以不斷提升。然而,磁帶庫本身的寫入速度雖快,但是基于磁帶庫的備份架構卻存在一個常常會妨礙數據以其最大速率寫入磁帶庫的技術障礙。 具體來說,在將數據備份到磁帶庫上之前,首先需要將數據收集到緩存層的數據節點上,以便為寫入磁帶介質做準備(進行序列化)。對于此類數據節點中的SAS RAID緩存層磁盤,其讀取和寫入操作通常無法達到讓磁帶庫管道飽和的速度,進而導致出現備份速度緩慢等挑戰,無法發揮磁帶庫的高速潛能。

百度智能云舊備份架構中緩存盤面臨的挑戰 以百度智能云此前使用的機械硬盤(HDD)為例,其讀取速度僅為200 MB/s,不但難以滿足磁帶庫寫入速度為每秒600 MB/s的要求,還把磁帶庫的備份速度降低了三分之二,使得大量數據存儲歸檔和備份工作變得效率低下。 例如,通過安裝在車隊 300 輛車上的物聯網IoT傳感器,百度的自動駕駛汽車解決方案生成了大量數據,且已記錄超過200萬公里,這些物聯網數據大部分被歸類為“冷”數據,并通過數據節點發送到磁帶上以進行長期存儲,但由于緩存層磁盤速度較慢,使得這個工作變得十分的緩慢。 再如,百度的數據保留政策要求每3-6年就要將存儲在磁帶庫上的數據轉移至新磁帶庫,這就需要使用緩存盤,而這種超負荷的緩存工作負載(不斷寫入和讀取越來越多的存檔數據),同樣也暴露出系統的低效率問題。 由此可見,快速的磁帶庫離不開快速緩存盤,緩存盤的性能之于數據備份速度的重要性不言而喻。為了打破緩存層磁盤帶來的“瓶頸”,百度智能云希望通過尋找到一種更好的緩存驅動替代方案,以進一步提升磁帶庫備份的速度。 緩存盤選型的難題 根據自身的實際業務情況,百度智能云團隊在考慮其緩存驅動的替代方案時,提出了以下數據層要求: 一是,讀取速度要求方面,希望在寫入壓力很大的情況下,替代的緩存盤也需具備600 MB/s的讀取性能,以匹配磁帶庫600 MB/s的寫入速度。 二是,寫速度要求方面,為了保持磁帶寫入速度飽和以提高成本效益,磁盤將新數據寫入緩存盤的速度應至少與緩存數據寫入磁帶的速度相等,即600 MB/s。 三是,耐用性要求方面,磁帶庫的存儲容量為16PB,而百度智能云團隊希望緩 存盤能夠持續服務三代磁帶,為了實現此目標,緩存盤需支持總寫入量為48 PBW (硬盤理論壽命所對應的總寫入數據量)的耐用性。 為此,百度智能云團隊首先研究了使用基于NAND的SSD替代數據節點上基于HDD的緩存盤。但是研究顯示,基于NAND的SSD的局限在于,隨機寫入操作需要大量的后臺介質管理,這會大大降低每個磁盤的吞吐量并縮短磁盤壽命。 在此基礎上,百度的團隊又評估多個 NAND 驅動器的兩種配置,包括16盤 RAID0 的標準耐用性配置,以及6盤 RAID0+1的中等耐用性配置,雖然這兩種配置方案都能滿足600 MB/s的讀取和寫入要求,但卻需要過多的NVMe插槽才能達到所需的吞吐率,這將使得維護工作變得更加復雜。 此外,根據設備規格進行的計算還表明,這兩種配置方案也都不能滿足耐用性要求,其PBW分別為30.72和36.75,顯然和百度智能云所確定的48 PBW目標“相距甚遠”。 不難看出,無論是傳統的HDD還是基于NAND的SSD,都難以滿足百度智能云希望實現的性能和耐用性要求,通過多方的對比,最終百度智能云團隊將目標鎖定在了英特爾傲騰固態盤上。 速度和耐用性兼備 測試顯示,百度智能云通過采用英特爾傲騰固態盤作為數據節點上的緩存盤,該解決方案可在600 MB/s (隨機)寫入工作負載下,實現 600 MB/s 的讀取性能。與基于 NAND 的固態盤不同,英特爾傲騰固態盤的優勢還在于,無論其寫入壓力如何,都能保持讀取響應時間不變。

將英特爾傲騰固態盤的鏡像用作緩存盤,滿足了百度的備份解決方案要求 不僅如此,英特爾傲騰固態盤的高耐用性(164 PBW 和每日整盤寫入次數為 60 DWPD),遠遠超出了48 PBW的耐用性要求,通過這一全新解決方案,百度可以在 相同時間內備份三倍的數據量。 可以看到,借助英特爾傲騰固態盤,百度智能云不僅實現了出色耐用性的同時,也滿足繁重的讀/寫混合型工作負載帶寬要求,而通過此解決方案,百度現在備份相同數據量所需的時間比之前的解決方案減少了67%。 對此,百度智能云相關人士表示:“英特爾傲騰固態盤憑借其高帶寬、高耐用性、低延遲和易于維護的優勢,為百度帶來了高價值,并幫助我們加快創新磁帶庫解決方案,同時降低成本、提高效率。”

值得一提的是,百度智能云還進一步發揮其產品及技術優勢,將英特爾傲騰方案推上云端,以智能云虛擬化塊存儲 CDS、云原生數據庫 GaiaDB 等產品為出口,打造云上多樣解決方案。而傲騰方案在較大的寫入壓力下依然能保持數據的快速響應及高性能讀寫,讓百度智能云為客戶提供超低成本及便攜的數據管理能力,輸出持續先進的云服務,豐富云端存儲產品和體驗打下了堅實的基礎。 總的來看,今天數據的生命周期正變得越來越長,特別是過去幾年國家出臺了信息安全和個人隱私的相關法律,而被合規、數據保護等痛點困擾的企業也不在少數;再加上企業對數據越來越重視,特別是某些關鍵領域的企業甚至要求生產環境下的數據,需要有五年、十年,甚至數個十年的保存,由此也讓數據歸檔變得更加重要。 目前,類似的需求在視頻監控、生命科學、金融服務、媒體和娛樂、政府、醫療等行業特別明顯。所以,未來如何保障數據在更長久周期內的可用性、可回溯性、可審計性,無疑今天用戶最為關注的話題。

而在此過程中,百度智能云通過將英特爾傲騰固態盤作為緩存數據提升磁帶庫備份速度,不僅破解了海量數據增長帶來的歸檔和備份的壓力,也為眾多用戶提供了更為豐富的產品體驗。

原文標題:【觀察】百度智能云:釋放“傲騰上云”紅利,重新定義歸檔存儲服務

文章出處:【微信公眾號:高端存儲知識】歡迎添加關注!文章轉載請注明出處。

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    61

    文章

    10169

    瀏覽量

    173943
  • 百度
    +關注

    關注

    9

    文章

    2326

    瀏覽量

    91825
  • 數字經濟
    +關注

    關注

    2

    文章

    1084

    瀏覽量

    18689

原文標題:【觀察】百度智能云:釋放“傲騰上云”紅利,重新定義歸檔存儲服務

文章出處:【微信號:High-end_Storage,微信公眾號:高端存儲知識】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    百度智能兩大基礎設施再升級

    近日,在Create2025百度AI開發者大會上,沈抖分享了百度智能智能基礎設施建設方面的最新成果,并在算力、模型及應用等方面發布一系列
    的頭像 發表于 04-30 10:20 ?208次閱讀

    格靈深瞳與百度智能達成戰略合作,共筑AI算力新基建

    4月25日,在Create2025百度AI開發者大會期間,百度智能與格靈深瞳正式簽署戰略合作協議。雙方將以“技術互補、生態共建、價值共生”為原則,聚焦大模型與行業場景深度融合,共同構
    的頭像 發表于 04-27 10:20 ?513次閱讀

    百度智能發布昆侖芯三代萬卡集群及DeepSeek-R1/V3上線

    01百度智能點亮昆侖芯三代萬卡集群 近日,百度智能成功點亮昆侖芯三代萬卡集群,這也是國內首個
    的頭像 發表于 02-11 10:58 ?587次閱讀

    百度智能四款大模型應用接入DeepSeek

    近日,百度智能旗下四款重量級大模型應用產品——客悅、曦靈、一見、甄知,正式迎來了全新升級,接入了先進的DeepSeek模型。這一重要更新,標志著百度
    的頭像 發表于 02-10 18:00 ?706次閱讀

    百度智能與統信軟件達成戰略合作

    近日,百度智能與統信軟件正式簽署了戰略合作協議,標志著雙方在數字技術領域攜手邁進新的發展階段。 此次合作,百度
    的頭像 發表于 02-10 15:43 ?367次閱讀

    百度智能四款大模型應用完成DeepSeek適配

    生成、視覺智能分析、知識管理等高價值業務場景提供更加豐富的AI大模型應用選擇,滿足用戶多元的落地需求。這些應用場景不僅覆蓋了企業的日常運營,還涉及到了數字人、視覺分析等前沿技術領域,展現了百度
    的頭像 發表于 02-10 10:47 ?415次閱讀

    百度與阿里上線DeepSeek模型部署服務

    和DeepSeek-V3模型已正式入駐其千帆平臺,并推出了極具吸引力的低價方案及限時兩周的免費試用服務。這一舉措旨在讓更多的用戶能夠體驗到AI技術的魅力,同時也為百度智能在AI領域的
    的頭像 發表于 02-05 15:40 ?783次閱讀

    百度智能點亮昆侖芯三代萬卡集群

    近日,百度智能宣布成功點亮昆侖芯三代萬卡集群,這一成就不僅在國內尚屬首次,也標志著百度在人工智能算力領域取得了重大突破。據了解,
    的頭像 發表于 02-05 14:58 ?539次閱讀

    ElfBoard開源項目|百度智能平臺的人臉識別項目

    百度智能平臺的人臉識別項目,旨在利用其強大的人臉識別服務實現自動人臉識別。選擇百度智能的原因
    的頭像 發表于 12-24 10:54 ?1145次閱讀
    ElfBoard開源項目|<b class='flag-5'>百度</b><b class='flag-5'>智能</b><b class='flag-5'>云</b>平臺的人臉識別項目

    百度智能榮獲A級工業互聯網“雙跨”平臺企業

    的是,百度智能在本次評價中表現突出,榮獲A級工業互聯網“雙跨”平臺企業稱號。這不僅是對百度智能
    的頭像 發表于 11-11 13:53 ?581次閱讀

    英特爾與百度共同為AI時代打造高性能基礎設施

    可持續發展等領域的實踐與探索,并圍繞為AI時代的產業發展和升級提供“芯”動力等話題進行深入探討。 英特爾市場營銷集團副總裁、中國區與行業解決方案和數據中心銷售部總經理梁雅莉指出,“為擁抱AI為代表的新質生產力,英特爾攜手
    的頭像 發表于 09-27 09:48 ?397次閱讀
    英特爾與<b class='flag-5'>百度</b>共同為AI時代<b class='flag-5'>打造</b>高性能基礎設施

    百度智能發布千帆大模型平臺3.0

    2024年百度智大會上,百度智能震撼發布千帆大模型平臺3.0,標志著其在AI領域又一里程碑式的進步。新版平臺不僅實現了全面升級,更交出了
    的頭像 發表于 09-26 14:51 ?704次閱讀

    深圳華恩運維科技簽約百度智能合作伙伴開啟人臉識別新篇章

    ”為主題,百度技術專家田悅、吳延宇為現場各行業合作伙伴解讀了百度AI及目系列AI硬件產品及解決方案,聚焦AI如何賦能產業智能化發展。
    的頭像 發表于 07-28 17:05 ?800次閱讀
    深圳華恩運維科技簽約<b class='flag-5'>百度</b><b class='flag-5'>智能</b><b class='flag-5'>云</b>合作伙伴開啟人臉識別新篇章

    esp32在Arduino IDE中可以實現調用百度智能接口嗎?

    esp32在Arduino IDE中可以實現調用百度智能接口嗎?涉及到http協議,想知道能不能不用esp-idf
    發表于 06-28 06:52

    百度智能升級3款大模型應用:面向三類場景打造企業“超級員工”

    平臺、百度智能曦靈數字人平臺三款大模型應用產品,致力于為企業用戶提供“超級知識官”重塑知識管理流程、打造覆蓋客戶運營全鏈路的“超級客服”、上崗數字人“超級主播”為營銷賦能,幫助企業實
    的頭像 發表于 06-25 19:22 ?1357次閱讀