女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

廣告業務存儲神器:華為云GaussDB(for Redis)

禿頭也愛科技 ? 來源:禿頭也愛科技 ? 作者:禿頭也愛科技 ? 2022-11-25 09:04 ? 次閱讀

摘要:高性能、大容量、低成本、強穩定性,廣告業務需要的Ta都有

一、從需求場景說起,什么是RTA廣告業務?

在互聯網時代,媒體平臺逐漸成為廣告業務的主體,而作為廣告主的企業往往每年需花費數億甚至數十億廣告費,卻依然難以準確觸達目標用戶,這就造成大量資金浪費。在這樣的需求場景下,RTA廣告業務模式逐漸流行起來。

RTA 即Realtime API的簡稱,是一套接口服務,用于滿足廣告主實時個性化的投放需求,在競價中減少資金浪費。簡單來說,RTA大體流程如下:

  1. 媒體在將廣告曝光給用戶前,先通過RTA接口詢問廣告主是否參與本次競價;
  2. 廣告主結合自己的__畫像數據(一般是百GB~數TB的key-value數據)__進行決策,快速響應媒體側,表明是否要參與本次曝光競價,以及具體的曝光策略;
  3. 媒體平臺根據價高者得原則,進行精準目標廣告投放。

16692969122231dyzwpnsd7

RTA廣告業務流程圖

RTA讓廣告投放變得更精準,更省錢,還可以滿足許多不同的投放需求,例如獲取新用戶、召回流失用戶等。

二、聊聊RTA中的數據存儲選型

對廣告主來說,RTA業務價值明顯,但媒體側可是設置了不小的技術門檻,一般要求RTA系統高峰承載20w+ QPS,50到100ms快速響應。當不達標時,媒體側會有降級和清退機制,例如暫時關閉廣告主的RTA接入通道。

因此,RTA業務的首要需求是使用靠譜的畫像數據庫:

  1. 毫秒級響應,支持數十萬級QPS
  2. 穩定性高,關鍵時刻不能掉鏈子
  3. 支持百GB~數TB的畫像存儲,且成本可控

根據經驗,很多公司會使用開源Redis集群來做這件事,但其實__開源Redis并不太適合這類大數據場景:__

一方面,雖然開源Redis并發性能和響應都很優秀,但終究只是緩存,無法提供數據庫級的穩定性保障,丟數據、fork抖動、分片不均OOM、擴容耗時久等等,都是很常見的問題。

另一方面,由于開源Redis中存放的數據無法突破內存限制,上百GB的數據存儲價格非常昂貴,例如512GB規格的開源Redis接近5w/月。

在這類大數據業務場景下,我們推薦使用華為云數據庫GaussDB(for Redis)做畫像數據存儲。

三、大數據業務存儲神器:華為云數據庫GaussDB(for Redis)

GaussDB(for Redis)是華為云企業級存算分離Redis數據庫,使用上與開源Redis別無二致,并且能夠兼顧緩存與存儲兩類典型場景:

  1. 內存+分布式存儲池(Nvme SSD),提供毫秒級響應速度,并實現了大幅降本
  2. 命令兼容度>98%,業務零改造平遷
  3. 容量最大支持36TB,高壓縮比,且保障數據庫級別可靠存儲
  4. 算力用多少買多少,支持水平擴展到千萬級QPS
  5. 無感熱擴容,128GB到512GB也只需一秒
  6. 支持多DB租戶訪問權限隔離(增強版ACL)

RTA廣告業務對畫像存儲的核心需求是:響應快、穩定性高、大容量且不貴,GaussDB(for Redis)充分滿足這類大數據業務需求。

  • 超低時延,性能滿足媒體側要求

根據現網的案例經驗,在數十萬QPS流量下,GaussDB(for Redis)可穩定保持平均時延1ms,p99時延2ms。

媒體側一般對廣告主端到端響應要求在50~100ms,這其中包括了業務及網絡鏈路的耗時,GaussDB(for Redis)可以很好地滿足響應要求,并給業務鏈路留有充足的余量。

為什么GaussDB(for Redis)在存算分離的架構下還能提供低時延訪問?

  1. 自動冷熱分離,計算層的內存資源會被用來充分加速熱數據
  2. 存儲池是基于高性能Nvme SSD和RDMA網絡所構建,響應速度其實也很快

實際上,響應快速并非內存的專利,Nvme SSD同樣有優秀的時延表現,下圖是市面上某款Nvme SSD的性能指標:

16692969130463z2177nyhq

  • 作為存算分離的數據庫,穩定性遠超緩存Redis

開源Redis的穩定性問題存在已久,單線程、fork機制、Gossip協議……這些都是讓開源Redis穩定性不夠好的原因。在小數據量緩存場景問題不一定經常出現,但在百GB的大數據存儲場景下很容易成為打破系統穩定的隱患。

GaussDB(for Redis)存算分離架構對穩定性的提升是巨大的。在擴容場景,只需調整存儲池配合,即可1秒完成擴容,業務0感知。由于數據全部存儲在分布式存儲池中,當計算節點發生故障,數據依然可見,業務只感知秒級抖動。同時,也不會發生分片數據不均OOM問題。

  • 存儲百GB畫像數據,比緩存Redis成本節省 50%以上

GaussDB(for Redis)在這類場景下能夠幫助企業實現有效降本,原因是:

  1. 內存+分布式存儲池(Nvme SSD)

開源Redis技術上無法突破內存限制,因此成本會隨著每漲1GB而線性增長,大數據業務中很容易帶來成本痛點。

GaussDB(for Redis)分布式存儲池采用的高性能Nvme SSD硬件成本雖然比普通SSD高,但是跟內存相比還是比較高性價比的。另外還支持根據實際所需QPS購買計算節點,避免不必要的算力成本浪費。

  1. 高壓縮比

很多畫像類業務使用protobuf格式,GaussDB(for Redis)采用了邏輯數據+塊數據雙重壓縮機制,對于protobuf的壓縮比效果很好。根據現網案例經驗,500GB的protobuf數據寫入GaussDB(for Redis)后,實際占用的存儲空間可壓縮到160G,壓縮率30%。

四、總結

RTA廣告競價業務近年來發展潛力巨大,一方面要滿足媒體側的性能指標要求,另一方面又要承擔企業降本重任。在這類典型大數據業務中,往往需要一款能夠兼顧性能與存儲降本需求的KV數據庫來做畫像存儲,華為云數據庫GaussDB(for Redis)無論從性能、穩定性,還是大容量、低成本,都充分滿足這類場景的需求,是其最佳存儲選型。
審核編輯:湯梓紅

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4499

    瀏覽量

    87054
  • 華為云
    +關注

    關注

    3

    文章

    2762

    瀏覽量

    18102
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    HarmonyOS5服務技術分享--存儲指南

    開啟版本控制 定期清理臨時文件 結合函數實現文件自動處理(如縮略圖生成) 結語 存儲用起來其實很簡單對不對?希望這篇指南能讓大家少走彎路。如果在實際開發中遇到問題,歡迎到華為開發
    發表于 05-22 19:17

    HarmonyOS5服務技術分享--存儲SDK文章整理

    在HarmonyOS ArkTS應用中集成華為存儲SDK指南 大家好呀!今天咱們來聊聊如何將華為存儲
    發表于 05-22 19:09

    HarmonyOS5服務技術分享--緩存快速上手指南

    大家好,今天我們來聊聊如何快速上手華為AppGallery Connect(AGC)的緩存服務。作為一款基于Serverless架構的Key-Value型緩存服務,它不僅能自動彈性伸縮,還能免去運
    發表于 05-22 18:37

    華為 GaussDB 助力國家統計局, 開啟統計現代化改革新篇章

    2023 年 8 月至 2024 年 5 月,華為 GaussDB 助力國家統計局順利完成第五次全國經濟普查(簡稱“五經普”)單位清查和普查登記數據采集處理工作。在此期間,全國 200 多萬名
    的頭像 發表于 02-12 16:49 ?1162次閱讀

    華為GaussDB助力統計現代化改革

    2023年8月至2024年5月,華為GaussDB助力國家統計局順利完成第五次全國經濟普查(簡稱“五經普”)單位清查和普查登記數據采集處理工作。在此期間,全國200多萬名普查員通過手持終端設備
    的頭像 發表于 02-12 10:59 ?374次閱讀

    華為 Flexus X 加速 Redis 案例實踐與詳解

    Redis 加速鏡像,更是為開發者提供了極大的便利。本文將詳細介紹如何利用華為 Flexus X 實例自帶的 Redis 鏡像,快速部署并配置
    的頭像 發表于 01-23 17:52 ?258次閱讀
    <b class='flag-5'>華為</b><b class='flag-5'>云</b> Flexus X 加速 <b class='flag-5'>Redis</b> 案例實踐與詳解

    Redis Cluster之故障轉移

    1. Redis Cluster 簡介 Redis Cluster 是 Redis 官方提供的 Redis 集群功能。 為什么要實現 Redis
    的頭像 發表于 01-20 09:21 ?742次閱讀
    <b class='flag-5'>Redis</b> Cluster之故障轉移

    服務器 Flexus X 實例,Docker 集成搭建 Redis 集群

    服務器之間平衡負載,確保系統的高可用性和數據一致性 搭建 Redis 集群 1、購買華為 Flexus X 實例 Flexus服務器X實例-華為
    的頭像 發表于 01-13 13:37 ?305次閱讀
    <b class='flag-5'>云</b>服務器 Flexus X 實例,Docker 集成搭建 <b class='flag-5'>Redis</b> 集群

    性能與可靠性并重,Flexus X 實例助力 Redis 三主三從集群高效運行

    能,確保您的業務在海量數據面前依然游刃有余。828 華為企業上節, 華為 Flexus X
    的頭像 發表于 01-07 17:21 ?348次閱讀
    性能與可靠性并重,Flexus X 實例助力 <b class='flag-5'>Redis</b> 三主三從集群高效運行

    華為Flexus X實例,Redis性能加速評測及對比

    隨著計算技術的飛速發展,Redis 作為一種高性能的內存數據庫,在各種應用場景中發揮著越來越重要的作用。為了滿足不同用戶對 Redis 性能的高要求,華為
    的頭像 發表于 12-29 15:47 ?419次閱讀
    <b class='flag-5'>華為</b><b class='flag-5'>云</b>Flexus X實例,<b class='flag-5'>Redis</b>性能加速評測及對比

    華為 Flexus X 輕松實現 Redis 一主多從高效部署

    ,Flexus?X 預裝 Redis 加速鏡像,簡化了 Redis 的安裝和配置流程,降低了技術門檻,使開發者能夠更專注于業務邏輯的實現。 ????????本文將詳細介紹如何在華為
    的頭像 發表于 12-27 13:45 ?431次閱讀
    <b class='flag-5'>華為</b><b class='flag-5'>云</b> Flexus X 輕松實現 <b class='flag-5'>Redis</b> 一主多從高效部署

    OpenAI考慮將廣告引入AI產品,拓展收入來源

    產品的ChatGPT日益受到市場關注。 據知情人士透露,為了這一目的,OpenAI正在積極從包括Meta和谷歌在內的科技巨頭那里招募廣告領域的專業人才。這些人才的加入,無疑將為OpenAI在廣告業務上的布局提供強有力的支持。 然而,Sarah Friar也在聲明中謹慎地指
    的頭像 發表于 12-04 13:58 ?471次閱讀

    NVIDIA助力百度提升數據分析效能

    在現代商業環境中,數據分析已然成為企業獲取成功的關鍵所在。長期以來,百度廣告數據團隊始終面臨著極為復雜的數據分析挑戰,其需要為逾千名用戶提供在線廣告業務分析服務,而這些用戶涵蓋策略工程師、產品經理
    的頭像 發表于 11-20 10:06 ?591次閱讀

    大模型時代下的新一代廣告系統

    沿的深度學習等算法技術,創新并應用到業務實踐中,賦能千萬商家和數億消費者的消費連接,不斷拓展中國乃至全世界的數字經濟邊界。 在這里,你將與各業務、產品、工程團隊緊密合作,深入京東億量級的數據與豐富的廣告業務場景
    的頭像 發表于 09-20 14:40 ?384次閱讀
    大模型時代下的新一代<b class='flag-5'>廣告</b>系統

    恒訊科技分析:數據庫rds和redis區別是什么如何選擇?

    數據庫RDS(Relational Database Service)和Redis是兩種不同類型的數據庫服務,它們有各自的特點和適用場景: 1、數據模型:RDS是一種關系型數據庫服務,通常用于存儲
    的頭像 發表于 08-19 15:31 ?723次閱讀