資料介紹
關于一致性
為什么需要Paxos或Quorum算法?分布式系統實現數據存儲,是通過多份數據副本來保證可靠,假設部分節點訪問數據失敗,還有其他節點提供一致的數據返回給用戶。對數據存儲而言,怎樣保證副本數據的一致性當屬分布式存儲最重要的問題。 一致性是分布式理論中的根本性問題,近半個世紀以來,科學家們圍繞著一致性問題提出了很多理論模型,依據這些理論模型,業界也出現了很多工程實踐投影。何為一致性問題?簡而言之,一致性問題就是相互獨立的節點之間,在可控的時間范圍內如何達成一項決議的問題。
強一致寫、多段式提交
強一致寫
解決這個問題最簡單的方法 ,就是強一致寫。在用戶提交寫請求后,完成所有副本更新再返回用戶,讀請求任意選擇某個節點。數據修改少節點少時,方案看起來很好,但操作頻繁則有寫操作延時問題,也無法處理節點宕機。
兩段式提交(2PC 、Three-Phase Commit)
既然實際系統中很難保證強一致,便只能通過兩段式提交分成兩個階段,先由Proposer(提議者)發起事物并收集Acceptor(接受者)的返回,再根據反饋決定提交或中止事務。
第一階段:Proposer發起一個提議,詢問所有Acceptor是否接受;
第二階段:Proposer根據Acceptor的返回結果,提交或中止事務。如果Acceptor全部同意則提交,否則全部終止。
兩階段提交方案是實現分布式事務的關鍵;但是這個方案針對無反饋的情況,除了“死等”,缺乏合理的解決方案。 Proposer在發起提議后宕機,階段二的Acceptor資源將鎖定死等。如果部分參與者接受請求后異常,還可能存在數據不一致的腦裂問題。
三段式提交(3PC、Three-Phase Commit)
為了解決2PC的死等問題,3PC在提交前增加一次準備提交(prepare commit)的階段,使得系統不會因為提議者宕機不知所措。接受者接到準備提交指令后可以鎖資源,但要求相關操作必須可回滾。
但3PC并沒有被用在我們的工程實現上,因為3PC無法避免腦裂,同時有其他協議可以做到更多的特性又解決了死等的問題。
圖1 三段式提交,在二段式提交基礎上增加prepare commit階段
主流的Paxos算法
微信后臺近期開始主要推廣Paxos算法用于內部分布式存儲。Paxos是Leslie Lamport提出的基于消息傳遞的一致性算法,解決了分布式存儲中多個副本響應讀寫請求的一致性,Paxos在目前的分布式領域幾乎是一致性的代名詞(據傳Google Chubby的作者Mike Burrows曾說過這個世界上只有一種一致性算法, 那就是Paxos,其他算法都是殘次品)。Paxos算法在可能宕機或網絡異常的分布式環境中,快速且正確地在集群內部對某個數據的值達成一致,并且保證只要任意多數節點存活,都不會破壞整個系統的一致性。Paxos的核心能力就是多個節點確認一個值,少數服從多數,獲得可用性和一致性的均衡。
- 分布式電源對配電系統的影響分析
- 分布式存儲系統的局部修復碼分析 19次下載
- 面向時空數據的分布式區塊鏈綜述 15次下載
- Ceph分布式存儲系統性能優化研究綜述 5次下載
- 基于分布式數據Cache的實時動態遷移機制 20次下載
- 一種可行的分布式存儲系統安全構造方法 21次下載
- 基于預分區策略的分布式數據存儲方法 18次下載
- 云存儲中的Ceph分布式文件系統及節點選擇 13次下載
- 區塊鏈中的分布式數據庫管理系統相關研究 8次下載
- 如何設計和實現基于UART的機器人分布式控制通信協議概述 7次下載
- 集群環境下分布式索引的實現 0次下載
- 分布式事務控制的原理實例分析 0次下載
- 基于省級截面數據的分布式光伏發電補貼政策實證分析_賈亞雷 0次下載
- 工業機器人分布式控制系統實例 112次下載
- 基于IEEE1588協議的分布式系統時鐘同步方法
- 分布式存儲架構面臨的挑戰 1513次閱讀
- 如何使用分布式存儲系統促進AI模型訓練 608次閱讀
- 融合互通,浪潮分布式融合存儲AS13000加速海量數據處理 727次閱讀
- 干貨:解決分布式緩存與數據庫的雙存儲雙寫 2616次閱讀
- 應對海量圖片存儲的分布式存儲解決方案 3824次閱讀
- 分布式光纖傳感器原理_分布式光纖傳感器的應用 8835次閱讀
- 關于騰訊的開源分布式存儲系統DCache 2028次閱讀
- 淺談分布式存儲的六大優點 9004次閱讀
- Qtum量子鏈的分布式自治協議介紹 1504次閱讀
- 分布式存儲中HDFS與Ceph兩者的區別是什么,各有什么優勢? 3.1w次閱讀
- 存儲分布式系統中如何從CAP轉到PACELC 2780次閱讀
- 分布式存儲運維系統構架簡析 2671次閱讀
- 淺談分布式塊存儲的元數據服務設計 4951次閱讀
- 分布式存儲集群設計,集群網絡規劃方案 2880次閱讀
- 深度解讀分布式存儲技術之分布式剪枝系統 1861次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1490次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論
查看更多