5月28日,奇點云2024 StartDT Day數智科技大會暨產品發布會召開,同期發布了2024年版《OLAP數據庫引擎選型白皮書》,為業界伙伴提供最新的選型參考。作為奇點云生態合作伙伴,中科馭數分享的國產DPU對Apache Spark的加速效果測試成果,成為本次白皮書的亮點章節之一。
近年來,大數據行業的蓬勃發展除了由軟件層的持續迭代創新推動,也有賴于計算機硬件環境的持續優化。業內越來越多觀點認為,DPU則可以在數據流上就近計算,實現數據處理的低時延和高吞吐,更具靈活性與效率,CPU+DPU的異構計算解決方案將是應對大數據性能瓶頸的新趨勢,DPU也越來越得到數據中心運營商和大數據軟件廠商的關注。
在這一背景下,奇點云與中科馭數攜手合作,針對“Spark+Hive”這一典型大數據計算場景,開展了DPU與CPU環境下的性能對比測評。在評測方案中,引入了中科馭數基于DPU的Spark加速解決方案中最底層的DPU硬件、HADOS平臺層,以及專門針對Spark的DPU加速層,可以無縫集成至現有Spark生態系統。
經對比測試,DPU技術的應用顯著提高了數據處理效率、以及資源利用率。在數據計算和處理場景中,DPU環境相較于傳統CPU環境下的查詢性能提升可達50%-60%。同時,DPU環境下整體較CPU環境的峰值性能資源有優化,整機CPU峰值降低24%,內存消耗減少50%,且系統運行更加穩定。
目前,適配國產環境已成為金融、政企等多個領域企業對系統選型、改造的硬性要求。身處浪潮之中的DPU,其廣泛應用與價值釋放,同樣也離不開與眾多軟硬件提供商的緊密合作及行業生態的共同構建。中科馭數也希望通過與奇點云等廠商開展技術測評合作,來加深與產業鏈各方的協作,實踐DPU價值落地,共同推動DPU技術與解決方案在各行各業的深度融合,從而更有效地賦能終端用戶,提供更加高效、定制化的產品和服務。
-
DPU
+關注
關注
0文章
390瀏覽量
24697 -
大數據
+關注
關注
64文章
8951瀏覽量
139480 -
中科馭數
+關注
關注
0文章
133瀏覽量
4274
原文標題:中科馭數助力奇點云《2024 OLAP數據庫引擎選型白皮書》發布,國產DPU加速大數據處理成亮點
文章出處:【微信號:yusurtech,微信公眾號:馭數科技】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
從白皮書數據看北斗規模化應用發展前景

中興通訊發布創新與知識產權白皮書
龍芯中科發布2024年版龍架構生態白皮書
雷曼光電參編的COB顯示屏調研白皮書發布
微軟發布《GraphRAG實踐應用白皮書》助力開發者
Omdia與華為共發布NPS管理白皮書
紫光同芯參編《智能底盤操作系統白皮書》發布

華為發布天線數字化白皮書
美通社推出《智能科技行業媒體概況》白皮書
中科曙光聯合發布《智能算力產業發展白皮書》
移遠通信《5G RedCap技術發展及應用白皮書》重磅發布

評論