www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當(dāng)前位置:首頁 > 公眾號精選 > 架構(gòu)師社區(qū)
[導(dǎo)讀]一致性就是數(shù)據(jù)保持一致,在分布式系統(tǒng)中,可以理解為多個節(jié)點中數(shù)據(jù)的值是一致的。

來源:https://zhuanlan.zhihu.com/p/130332285

作者:無知影

為什么需要一致性

  1. 數(shù)據(jù)不能存在單個節(jié)點(主機)上,否則可能出現(xiàn)單點故障。

  2. 多個節(jié)點(主機)需要保證具有相同的數(shù)據(jù)。

  3. 一致性算法就是為了解決上面兩個問題。

一致性算法的定義

一致性就是數(shù)據(jù)保持一致,在分布式系統(tǒng)中,可以理解為多個節(jié)點中數(shù)據(jù)的值是一致的。

一致性的分類

強一致性

保證系統(tǒng)改變提交以后立即改變集群的狀態(tài)。

  • Paxos

  • Raft(muti-paxos)

  • ZAB(muti-paxos)

弱一致性

也叫最終一致性,系統(tǒng)不保證改變提交以后立即改變集群的狀態(tài),但是隨著時間的推移最終狀態(tài)是一致的。

  • DNS系統(tǒng)

  • Gossip協(xié)議

一致性算法實現(xiàn)舉例

  • Google的Chubby分布式鎖服務(wù),采用了Paxos算法

  • etcd分布式鍵值數(shù)據(jù)庫,采用了Raft算法

  • ZooKeeper分布式應(yīng)用協(xié)調(diào)服務(wù),Chubby的開源實現(xiàn),采用ZAB算法

Paxos算法

概念介紹

  1. Proposal提案,即分布式系統(tǒng)的修改請求,可以表示為[提案編號N,提案內(nèi)容value]

  2. Client用戶,類似社會民眾,負(fù)責(zé)提出建議

  3. Propser議員,類似基層人大代表,負(fù)責(zé)幫Client上交提案

  4. Acceptor投票者,類似全國人大代表,負(fù)責(zé)為提案投票,不同意比自己以前接收過的提案編號要小的提案,其他提案都同意,例如A以前給N號提案表決過,那么再收到小于等于N號的提案時就直接拒絕了

  5. Learner提案接受者,類似記錄被通過提案的記錄員,負(fù)責(zé)記錄提案

Basic Paxos算法

步驟:

  1. Propser準(zhǔn)備一個N號提案

  2. Propser詢問Acceptor中的多數(shù)派是否接收過N號的提案,如果都沒有進(jìn)入下一步,否則本提案不被考慮

  3. Acceptor開始表決,Acceptor無條件同意從未接收過的N號提案,達(dá)到多數(shù)派同意后,進(jìn)入下一步

  4. Learner記錄提案

分布式一致性算法:Paxos、Raft、ZAB、Gossip
節(jié)點故障
  • 若Proposer故障,沒關(guān)系,再從集群中選出Proposer即可

  • 若Acceptor故障,表決時能達(dá)到多數(shù)派也沒問題

潛在問題-活鎖

假設(shè)系統(tǒng)有多個Proposer,他們不斷向Acceptor發(fā)出提案,還沒等到上一個提案達(dá)到多數(shù)派下一個提案又來了,就會導(dǎo)致Acceptor放棄當(dāng)前提案轉(zhuǎn)向處理下一個提案,于是所有提案都別想通過了。

Multi Paxos算法

根據(jù)Basic Paxos的改進(jìn):整個系統(tǒng)只有一個Proposer,稱之為Leader。

步驟:

  1. 若集群中沒有Leader,則在集群中選出一個節(jié)點并聲明它為第M任Leader。

  2. 集群的Acceptor只表決最新的Leader發(fā)出的最新的提案

  3. 其他步驟和Basic Paxos相同

分布式一致性算法:Paxos、Raft、ZAB、Gossip
算法優(yōu)化

Multi Paxos角色過多,對于計算機集群而言,可以將Proposer、Acceptor和Learner三者身份集中在一個節(jié)點上,此時只需要從集群中選出Proposer,其他節(jié)點都是Acceptor和Learner,這就是接下來要討論的Raft算法

Raft算法

Paxos算法不容易實現(xiàn),Raft算法是對Paxos算法的簡化和改進(jìn)

概念介紹

  1. Leader總統(tǒng)節(jié)點,負(fù)責(zé)發(fā)出提案

  2. Follower追隨者節(jié)點,負(fù)責(zé)同意Leader發(fā)出的提案

  3. Candidate候選人,負(fù)責(zé)爭奪Leader

分布式一致性算法:Paxos、Raft、ZAB、Gossip

Raft算法將一致性問題分解為兩個的子問題,Leader選舉狀態(tài)復(fù)制

Leader選舉

  1. 每個Follower都持有一個定時器

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 當(dāng)定時器時間到了而集群中仍然沒有Leader,F(xiàn)ollower將聲明自己是Candidate并參與Leader選舉,同時將消息發(fā)給其他節(jié)點來爭取他們的投票,若其他節(jié)點長時間沒有響應(yīng)Candidate將重新發(fā)送選舉信息

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 集群中其他節(jié)點將給Candidate投票

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 獲得多數(shù)派支持的Candidate將成為第M任Leader(M任是最新的任期)

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 在任期內(nèi)的Leader會不斷發(fā)送心跳給其他節(jié)點證明自己還活著,其他節(jié)點受到心跳以后就清空自己的計時器并回復(fù)Leader的心跳。這個機制保證其他節(jié)點不會在Leader任期內(nèi)參加Leader選舉。

分布式一致性算法:Paxos、Raft、ZAB、Gossip
分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 當(dāng)Leader節(jié)點出現(xiàn)故障而導(dǎo)致Leader失聯(lián),沒有接收到心跳的Follower節(jié)點將準(zhǔn)備成為Candidate進(jìn)入下一輪Leader選舉

  2. 若出現(xiàn)兩個Candidate同時選舉并獲得了相同的票數(shù),那么這兩個Candidate將隨機推遲一段時間后再向其他節(jié)點發(fā)出投票請求,這保證了再次發(fā)送投票請求以后不沖突

分布式一致性算法:Paxos、Raft、ZAB、Gossip

狀態(tài)復(fù)制

  1. Leader負(fù)責(zé)接收來自Client的提案請求(紅色提案表示未確認(rèn)

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 提案內(nèi)容將包含在Leader發(fā)出的下一個心跳中

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. Follower接收到心跳以后回復(fù)Leader的心跳

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. Leader接收到多數(shù)派Follower的回復(fù)以后確認(rèn)提案并寫入自己的存儲空間中并回復(fù)Client

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. Leader通知Follower節(jié)點確認(rèn)提案并寫入自己的存儲空間,隨后所有的節(jié)點都擁有相同的數(shù)據(jù)

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 若集群中出現(xiàn)網(wǎng)絡(luò)異常,導(dǎo)致集群被分割,將出現(xiàn)多個Leader

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 被分割出的非多數(shù)派集群將無法達(dá)到共識,即腦裂,如圖中的A、B節(jié)點將無法確認(rèn)提案

分布式一致性算法:Paxos、Raft、ZAB、Gossip
分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 當(dāng)集群再次連通時,將只聽從最新任期Leader的指揮,舊Leader將退化為Follower,如圖中B節(jié)點的Leader(任期1)需要聽從D節(jié)點的Leader(任期2)的指揮,此時集群重新達(dá)到一致性狀態(tài)

分布式一致性算法:Paxos、Raft、ZAB、Gossip

分布式一致性算法:Paxos、Raft、ZAB、Gossip

ZAB算法

ZAB也是對Multi Paxos算法的改進(jìn),大部分和raft相同,和raft算法的主要區(qū)別:

  1. 對于Leader的任期,raft叫做term,而ZAB叫做epoch

  2. 在狀態(tài)復(fù)制的過程中,raft的心跳從Leader向Follower發(fā)送,而ZAB則相反。

Gossip算法

Gossip算法每個節(jié)點都是對等的,即沒有角色之分。Gossip算法中的每個節(jié)點都會將數(shù)據(jù)改動告訴其他節(jié)點(類似傳八卦)。有話說得好:"最多通過六個人你就能認(rèn)識全世界任何一個陌生人",因此數(shù)據(jù)改動的消息很快就會傳遍整個集群。

  1. 集群啟動,如下圖所示(這里設(shè)置集群有20個節(jié)點)

分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 某節(jié)點收到數(shù)據(jù)改動,并將改動傳播給其他4個節(jié)點,傳播路徑表示為較粗的4條線

分布式一致性算法:Paxos、Raft、ZAB、Gossip
分布式一致性算法:Paxos、Raft、ZAB、Gossip
  1. 收到數(shù)據(jù)改動的節(jié)點重復(fù)上面的過程直到所有的節(jié)點都被感染

特別推薦一個分享架構(gòu)+算法的優(yōu)質(zhì)內(nèi)容,還沒關(guān)注的小伙伴,可以長按關(guān)注一下:

分布式一致性算法:Paxos、Raft、ZAB、Gossip

分布式一致性算法:Paxos、Raft、ZAB、Gossip

分布式一致性算法:Paxos、Raft、ZAB、Gossip

長按訂閱更多精彩▼

分布式一致性算法:Paxos、Raft、ZAB、Gossip

如有收獲,點個在看,誠摯感謝

免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺僅提供信息存儲服務(wù)。文章僅代表作者個人觀點,不代表本平臺立場,如有問題,請聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險,如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團(tuán))股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉