女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AIGC掀算力需求革命,邊緣計算將不再“邊緣”

科技云報到 ? 來源:jf_60444065 ? 作者:jf_60444065 ? 2024-04-22 14:51 ? 次閱讀

科技云報道原創。

隨著以大模型為代表的AIGC時代拉開序幕,算力需求持續爆發,AI與邊緣深度融合已是大勢所趨,越來越多的企業開始積極布局GenAI。

GenAI技術的商用化部署和應用成為企業競逐的新陣地,勾勒出大模型從“技術力”轉向“生產力”的新生態。

算力就是生產力,更豐富的算力資源成為人工智能競爭的核心基石。

IDC預計,全球AI計算市場規模將從2022年的195億美元增長到2026年的346.6億美元,其中GenAI計算市場規模將從2022年的8.2億美元增長到2026年的109.9億美元。

GenAI計算占整體AI計算市場的比例將從4.2%增長到31.7%。

AI算力瓶頸下邊緣計算崛起

隨著AI大模型爆發,大模型迭代和訓練所需的算力呈指數級增長。同時,單個AI超算規模也受到功耗、土地、散熱等因素制約,算力供給與需求的缺口持續放大。

此前,ChatGPT官網一度停止Plus付費項目的購買,GPT-4推出之后也已多次下調付費用戶訪問限制,原因是訪問量激增超出了服務器的承受能力。

隨著這場GenAI熱潮逐步擴張,算力短缺已成為行業面臨的共同挑戰。

如果說傳統算力是AI大模型的筋骨,那么邊緣算力就是遍布全身的神經系統。

英偉達指出,為了有效運用算力達成AI應用目標,大規模數據中心勢必要增加資本支出以擴大云端運算效能,同時也將帶動邊緣設備的銷售。

在AI向實際場景落地的過程中,邊緣算力的重要性將加速凸顯。未來的AI運算將呈現出“訓練與迭代在云端、推理與內容生產梯度分布(云側+霧側+邊緣側)”的格局變化,邊緣算力有望成為AI算力的重要組成部分。

相較于傳統云端,邊緣計算作為一種分布式計算架構,具有低延遲、高安全性、高可靠性、保護用戶隱私等優勢,其在實時決策在自動駕駛、醫療保健、金融、制造等各個領域都至關重要。

從效率方面看,邊緣計算使GenAI模型能夠在邊緣處理數據,從而顯著減少延遲并實現更快洞察。這意味著可以實時做出關鍵決策,從而提高運營效率、增強客戶體驗和更好的整體業務成果。

其次,通過利用邊緣計算,企業可以在邊緣設備網絡上分配計算負載,從而優化資源利用率并有效擴展。這種方法最大限度地減少了集中式云基礎設施的壓力并優化了帶寬使用,從而節省了成本并提高了性能。

第三,通過邊緣計算,GenAI模型可以直接在邊緣設備或本地服務器上運行,最大限度地減少將敏感數據傳輸到集中式云服務器的需要。

通過使數據更接近其來源,公司可以顯著降低與數據泄露、未經授權的訪問和合規性問題相關的風險。

從關系上看,邊緣計算并不尋求取代云計算,相反是對其重要的補充。邊緣計算和云之間的協作可實現混合架構,最大限度地發揮兩種范式的優勢。

GenAI模型可以利用云的可擴展性和存儲功能,同時受益于邊緣設備的低延遲和本地處理能力。這種融合確保了GenAI采用的多功能且適應性強的基礎設施。

邊緣計算重構生產力邊界

隨著企業開始越來越多地擁抱AI,邊緣計算和AI的融合擁有改變全球行業的巨大潛力。通過利用本地化處理、實時洞察和優化的資源利用,可以充分釋放AI的全部潛力,同時保護敏感數據并推動組織進入AI時代。

對此,全球科技巨頭開始將目光越來越多地轉向這一領域。

比如,華為、高通均推出邊緣AI產品。去年3月,高通中國在安卓手機上首次演示了模型參數超過10億的Stable Diffusion;華為于去年7月發布智慧搜圖功能,該功能通過對模型進行小型化處理。

華為與高通一定程度上驗證了高性能邊緣AI的可行性,并且表明通過模型壓縮+聯網智能的方式有望在邊緣端實現AI大模型的體驗。

此外,英偉達黃仁勛也表示,人工智能的下一個浪潮將是具身智能。具身智能能夠在物理世界中進行操作和感知,輸出各種機械動作。

具身智能將邊緣算力需求提升到了一個新高度,具身智能的“大腦”不僅要處理視覺信息、生成提示詞,更要負責輸出指令來執行機械動作。在移動芯片無法滿足所需算力的場景下,邊緣IDC將是算力的有效補充措施。

AIPC、AI手機、具身智能、自動駕駛等AI新應用的興起,無疑為邊緣云市場帶來了巨大影響,這種影響既體現在市場規模的擴張,也反映在技術要求的提升方面。

AIPC、AI手機作為AI普惠的終端,其本質在于云端與本地端的混合協作,通過利用云端的大數據處理能力來豐富本地設備的使用場景。

這種混合協作模式對云計算的性能和穩定性提出了更高的要求,同時也為云計算帶來了更多的數據處理和存儲需求。

邊緣云作為離用戶最近的數據處理中心,能夠迅速響應這些需求,提供低延遲、高帶寬的數據處理服務。

具身智能和自動駕駛的發展,更是推動了邊緣云市場的快速增長。智能機器人需要在真實的物理環境下執行各種任務,這就需要邊緣云提供強大的實時計算能力和數據交互能力。

不僅如此,邊緣AI應用場景仍在持續豐富。邊緣云服務提供商Zenlayer技術專家表示,對于實時性要求極高的應用,如自動駕駛和智能制造,邊緣計算能夠提供毫秒級的低延遲響應。

通過在車輛或生產線上部署邊緣計算節點,客戶可以實時處理傳感器數據,進行決策和控制,從而確保安全和高效的生產運行。

其次,對于需要處理大量數據的應用,如智能視頻監控和智慧城市,邊緣計算能夠減輕中心云的壓力,實現數據的本地化處理。

通過在攝像頭或傳感器附近部署邊緣計算設備,可以對視頻流進行實時分析,識別異常事件,并及時進行響應。

此外,邊緣計算還能夠解決大模型在數據傳輸和隱私保護方面的問題。通過將模型推理過程放在邊緣端進行,可以減少數據傳輸量,降低網絡帶寬要求,同時保護用戶數據的隱私和安全。

事實上,目前已有企業開始探索邊緣計算在AI大模型中的應用。

據Zenlayer技術專家介紹,某家專注于大模型技術的初創企業基于Zenlayer提供的一整套SDN解決方案,通過智能路由和數據傳輸協議優化等手段,搭建了一條高效穩定的數據傳輸通道,確保大模型在訓練、推理等關鍵環節都能獲得及時、準確的數據支持,從而顯著提升了模型的應用效果和用戶體驗。

此外,還有對于一些AI大模型客戶希望將算力資源部署至海外,Zenlayer針對這類需求,提供了算力托管或算力租賃服務,將計算資源部署在靠近用戶的邊緣數據中心,使大模型推理能夠在本地進行,極大地降低了數據傳輸的延遲和成本。

同時,Zenlayer還為客戶提供了一系列數據本地存儲和傳輸方案,在滿足各個國家對數據合規要求的同時,盡量優化業務交互體驗。

結語

如果把視線放得更長遠,在AI等眾多顛覆性技術的背后,總離不開邊緣計算的存在。當全球都沸騰在AIGC的風潮里,邊緣云服務商正通過邊緣端和云邊的融合協同,滿足更多元的AI應用場景,以更自如的算力,讓AI技術更自如地普惠。

【關于科技云報道】

專注于原創的企業級內容行家——科技云報道。成立于2015年,是前沿企業級IT領域Top10媒體。獲工信部權威認可,可信云、全球云計算大會官方指定傳播媒體之一。深入原創報道云計算、大數據、人工智能、區塊鏈等領域。

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 邊緣計算
    +關注

    關注

    22

    文章

    3273

    瀏覽量

    50503
  • 算力
    +關注

    關注

    2

    文章

    1141

    瀏覽量

    15434
  • AIGC
    +關注

    關注

    1

    文章

    383

    瀏覽量

    2200
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    小型化邊緣計算設備

    以下是關于小型化邊緣計算設備的核心技術與應用特點的綜合分析: 一、核心硬件平臺與表現? NVIDIA Jetson Orin系列? Jetson Orin Nano?:配備1024
    的頭像 發表于 05-20 07:47 ?87次閱讀

    如何選擇 邊緣計算服務器

    延遲≤50ms; 視頻分析、AI推理類需求側重?密度?,建議選擇支持16TOPS以上算且兼容TensorFlow/PyTorch框架的服務器(如RK3588芯片平臺); 教育、醫
    的頭像 發表于 05-06 07:58 ?116次閱讀
    如何選擇 <b class='flag-5'>邊緣</b><b class='flag-5'>計算</b>服務器

    6TOPSNPU加持!RK3588如何重塑8K顯示的邊緣計算新邊界

    在萬物互聯的時代背景下,邊緣計算與8K顯示的融合需求日益迫切。傳統的云端處理模式在面對8K超高清視頻數據時,常常出現延遲高、帶寬壓力大等問題,而邊緣
    發表于 04-18 15:32

    157 TOPS !AIO-OrinNX 主板助力邊緣 AI 應用

    Firefly最新推出NVIDlAJetsonOrin主板,搭載JetsonOrin系列核心模組,最高可達157TOPS,支持大模型私有化部署,為邊緣AI應用的開發與部署提供強勁的
    的頭像 發表于 04-02 16:33 ?899次閱讀
    157 TOPS <b class='flag-5'>算</b><b class='flag-5'>力</b>!AIO-OrinNX 主板助力<b class='flag-5'>邊緣</b> AI 應用

    《RK3588核心板:AIoT邊緣計算革命性引擎,能否解鎖智能物聯新范式?》

    ×Cortex-A55@1.8GHz) 與6TOPS NPU, 為邊緣設備賦予了“大腦級”處理能力。無論是智慧城市的交通監控,還是工業現場的實時質檢,RK3588核心板可同時處理多路8K視頻流并運行深度
    發表于 04-02 10:26

    【新品體驗】幸狐Omni3576邊緣計算套件免費試用

    幸狐Core3576 核心板為邊緣計算提供強大的,搭載八核64位CPU、ARM Mali-G52 MC3 GPU,并集成6 TOPS
    發表于 01-21 14:51

    未來邊緣GPU在車聯網中的創新應用(下)

    本文來源:壹靈海科技隨著5G通信技術的普及和人工智能技術的飛速發展,邊緣GPU將在車聯網領域發揮更加重要的作用。5G網絡的高帶寬和低延遲特性為車聯網提供了強大的支持,使得車輛能夠實時地交換大量
    的頭像 發表于 12-19 11:16 ?529次閱讀
    未來<b class='flag-5'>邊緣</b>GPU<b class='flag-5'>算</b><b class='flag-5'>力</b>在車聯網中的創新應用(下)

    一體化與邊緣計算:重新定義智能計算的未來

    、人工智能(AI)等技術的發展,數據量的分布性、實時性需求增加,邊緣計算也逐漸從概念走向落地。本文將介紹存一體化與邊緣
    的頭像 發表于 11-12 01:05 ?670次閱讀
    存<b class='flag-5'>算</b>一體化與<b class='flag-5'>邊緣</b><b class='flag-5'>計算</b>:重新定義智能<b class='flag-5'>計算</b>的未來

    英特爾攜手浪潮信息從邊緣計算邊緣邁進

    對多樣化應用場景的適應性和服務能力。隨著大模型和人工智能領域的快速發展,需求將愈發成為制約企業轉型、成長的因素。 從邊緣計算
    的頭像 發表于 11-10 14:03 ?1212次閱讀

    未來邊緣GPU在車聯網中的創新應用

    隨著汽車智能化、網聯化的發展,車聯網作為智能交通系統的重要組成部分,正逐漸成為全球汽車產業創新發展的重要戰略方向。邊緣GPU力作為一種新興的計算技術,具有高性能、低延遲、安全可靠等特點,為車聯網
    的頭像 發表于 10-25 08:08 ?616次閱讀
    未來<b class='flag-5'>邊緣</b>GPU<b class='flag-5'>算</b><b class='flag-5'>力</b>在車聯網中的創新應用

    邊緣計算邊緣設備的關系

    邊緣計算邊緣設備之間存在著密切的關系,它們是相互依存、相互促進的。以下是對這兩者關系的介紹: 一、定義與功能 邊緣計算
    的頭像 發表于 10-24 14:33 ?824次閱讀

    邊緣計算網關在儲能領域的應用分享

    隨著全球能源結構的轉型和智能電網的快速發展,儲能技術已成為推動能源革命的關鍵技術之一。在儲能系統中,邊緣計算網關作為一種新型的網絡設備,發揮著至關重要的作用。本文將詳細探討邊緣
    的頭像 發表于 07-03 14:14 ?530次閱讀

    邊緣AI需求爆發,邊緣計算網關亟待革新

    CAGR為17.4%,到2030年達到8004.3百萬美元。如果將范圍擴大到整個邊緣AI市場,根據英特爾公司高級副總裁兼網絡與邊緣事業部總經理Sachin Katti在分享中提到的數據,2030年全球邊緣AI市場將達到4450億
    的頭像 發表于 06-20 01:04 ?3093次閱讀

    邊緣計算網關是什么?邊緣計算網關的特點及價值

    在當今日益發展的工業互聯網時代,智能制造正逐漸改變著傳統制造業的生產模式和運營效率。在這個轉變中,數據的處理和分析能力成為企業提升競爭、實現智能化轉型的關鍵。其中,工業級邊緣計算網關作為連接工業
    的頭像 發表于 06-18 15:59 ?3527次閱讀
    <b class='flag-5'>邊緣</b><b class='flag-5'>計算</b>網關是什么?<b class='flag-5'>邊緣</b><b class='flag-5'>計算</b>網關的特點及價值

    邊緣計算是什么意思?邊緣計算的應用

    邊緣計算(Edge Computing)是一種分布式計算范式,它將計算任務從數據中心遷移到網絡邊緣設備(如智能手機、物聯網傳感器等)上進行處
    的頭像 發表于 05-31 14:19 ?1486次閱讀