資料介紹
關于一致性
為什么需要Paxos或Quorum算法?分布式系統(tǒng)實現數據存儲,是通過多份數據副本來保證可靠,假設部分節(jié)點訪問數據失敗,還有其他節(jié)點提供一致的數據返回給用戶。對數據存儲而言,怎樣保證副本數據的一致性當屬分布式存儲最重要的問題。 一致性是分布式理論中的根本性問題,近半個世紀以來,科學家們圍繞著一致性問題提出了很多理論模型,依據這些理論模型,業(yè)界也出現了很多工程實踐投影。何為一致性問題?簡而言之,一致性問題就是相互獨立的節(jié)點之間,在可控的時間范圍內如何達成一項決議的問題。
強一致寫、多段式提交
強一致寫
解決這個問題最簡單的方法 ,就是強一致寫。在用戶提交寫請求后,完成所有副本更新再返回用戶,讀請求任意選擇某個節(jié)點。數據修改少節(jié)點少時,方案看起來很好,但操作頻繁則有寫操作延時問題,也無法處理節(jié)點宕機。
兩段式提交(2PC 、Three-Phase Commit)
既然實際系統(tǒng)中很難保證強一致,便只能通過兩段式提交分成兩個階段,先由Proposer(提議者)發(fā)起事物并收集Acceptor(接受者)的返回,再根據反饋決定提交或中止事務。
第一階段:Proposer發(fā)起一個提議,詢問所有Acceptor是否接受;
第二階段:Proposer根據Acceptor的返回結果,提交或中止事務。如果Acceptor全部同意則提交,否則全部終止。
兩階段提交方案是實現分布式事務的關鍵;但是這個方案針對無反饋的情況,除了“死等”,缺乏合理的解決方案。 Proposer在發(fā)起提議后宕機,階段二的Acceptor資源將鎖定死等。如果部分參與者接受請求后異常,還可能存在數據不一致的腦裂問題。
三段式提交(3PC、Three-Phase Commit)
為了解決2PC的死等問題,3PC在提交前增加一次準備提交(prepare commit)的階段,使得系統(tǒng)不會因為提議者宕機不知所措。接受者接到準備提交指令后可以鎖資源,但要求相關操作必須可回滾。
但3PC并沒有被用在我們的工程實現上,因為3PC無法避免腦裂,同時有其他協(xié)議可以做到更多的特性又解決了死等的問題。
圖1 三段式提交,在二段式提交基礎上增加prepare commit階段
主流的Paxos算法
微信后臺近期開始主要推廣Paxos算法用于內部分布式存儲。Paxos是Leslie Lamport提出的基于消息傳遞的一致性算法,解決了分布式存儲中多個副本響應讀寫請求的一致性,Paxos在目前的分布式領域幾乎是一致性的代名詞(據傳Google Chubby的作者Mike Burrows曾說過這個世界上只有一種一致性算法, 那就是Paxos,其他算法都是殘次品)。Paxos算法在可能宕機或網絡異常的分布式環(huán)境中,快速且正確地在集群內部對某個數據的值達成一致,并且保證只要任意多數節(jié)點存活,都不會破壞整個系統(tǒng)的一致性。Paxos的核心能力就是多個節(jié)點確認一個值,少數服從多數,獲得可用性和一致性的均衡。
- 分布式電源對配電系統(tǒng)的影響分析
- 分布式存儲系統(tǒng)的局部修復碼分析 19次下載
- 面向時空數據的分布式區(qū)塊鏈綜述 15次下載
- Ceph分布式存儲系統(tǒng)性能優(yōu)化研究綜述 5次下載
- 基于分布式數據Cache的實時動態(tài)遷移機制 20次下載
- 一種可行的分布式存儲系統(tǒng)安全構造方法 21次下載
- 基于預分區(qū)策略的分布式數據存儲方法 18次下載
- 云存儲中的Ceph分布式文件系統(tǒng)及節(jié)點選擇 13次下載
- 區(qū)塊鏈中的分布式數據庫管理系統(tǒng)相關研究 8次下載
- 如何設計和實現基于UART的機器人分布式控制通信協(xié)議概述 7次下載
- 集群環(huán)境下分布式索引的實現 0次下載
- 分布式事務控制的原理實例分析 0次下載
- 基于省級截面數據的分布式光伏發(fā)電補貼政策實證分析_賈亞雷 0次下載
- 工業(yè)機器人分布式控制系統(tǒng)實例 112次下載
- 基于IEEE1588協(xié)議的分布式系統(tǒng)時鐘同步方法
- 分布式存儲架構面臨的挑戰(zhàn) 1513次閱讀
- 如何使用分布式存儲系統(tǒng)促進AI模型訓練 608次閱讀
- 融合互通,浪潮分布式融合存儲AS13000加速海量數據處理 727次閱讀
- 干貨:解決分布式緩存與數據庫的雙存儲雙寫 2616次閱讀
- 應對海量圖片存儲的分布式存儲解決方案 3824次閱讀
- 分布式光纖傳感器原理_分布式光纖傳感器的應用 8835次閱讀
- 關于騰訊的開源分布式存儲系統(tǒng)DCache 2028次閱讀
- 淺談分布式存儲的六大優(yōu)點 9004次閱讀
- Qtum量子鏈的分布式自治協(xié)議介紹 1504次閱讀
- 分布式存儲中HDFS與Ceph兩者的區(qū)別是什么,各有什么優(yōu)勢? 3.1w次閱讀
- 存儲分布式系統(tǒng)中如何從CAP轉到PACELC 2780次閱讀
- 分布式存儲運維系統(tǒng)構架簡析 2671次閱讀
- 淺談分布式塊存儲的元數據服務設計 4951次閱讀
- 分布式存儲集群設計,集群網絡規(guī)劃方案 2880次閱讀
- 深度解讀分布式存儲技術之分布式剪枝系統(tǒng) 1861次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環(huán)心率計步器體溫顯示設計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數發(fā)生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論