主頁 > 資料庫 > tendermint共識演算法

tendermint共識演算法

2020-10-12 21:37:47 資料庫

tendermint共識演算法

內容參考:

  1. 詳解Tendermint共識演算法
  2. tendermint介紹
  3. tendermint中文檔案

在這里插入圖片描述
圖中的Round/Height為直觀意思,step指圖中的每一狀態(Proposal、PreVote…)
狀態轉換周期:

NewHeight -> (Propose -> Prevote -> Precommit)+ -> Commit -> NewHeight ->...

每輪的開始對同步有弱的依賴性,每一輪開始期間,存在一個用來計時的本地同步時鐘,如果驗證者在TimeoutPropose時間內沒有收到提議,會立刻在本機生成一個特殊結構的空塊,假裝這個空塊是從Proposer節點那里收到的,這樣,無論如何,在時間T內,都會收到一個proposal區塊,要么是一個正常塊要么是一個空塊,然后接著對這個塊進行pre-vote投票和pre-commit投票,如果proposer掛了,絕大部分validator看到的都是一個空塊,因此空塊會獲得多數投票,進入commit階段,commit空塊的時候,不會真的往區塊鏈寫入一個空塊,而是什么都不寫,區塊高度不自增,保持不變,這樣相當于什么也沒有干,這一輪(round)是在空轉,下一輪開始的時候會換下一個validator當proposer,這樣當前那個掛掉的proposer,就不會卡住整個網路,

每輪收到提議以后,進入完全異步模式,之后驗證者的每一個網路決定需要得到2/3驗證者以上的同意,這樣降低了對同步時鐘的依賴或者網路的延遲,但是這也意味著如果得不到1/3以上驗證者的回應,整個網路將癱瘓,Tendermint在Liveness方面有所妥協,換取了更強的Finality,
舉個例子,如果在某一輪中proposer節點廣播出了一個新塊blockX,某個validator A節點沒有按時收到新塊,那么該A就會在本機構造一個空塊,當做是從proposer收到的,發出一個pre-vote nil投票訊息然后進入pre-vote回圈,并啟動一個超時定時器,這時進入了紅色內圈回圈,A開始監聽網路并收集投票資訊,

如果在規定時間內,收集到的投票數,無論是投給空塊的還是blockX的,加起來,沒有超過2/3,則無限等待,直到投票總數超過2/3

收集到了超過2/3的投票總數后,如果投給空塊的票數超過2/3,則發出pre-vote nil投給空塊,依舊留在紅色內圈;如果投給blockX的票數超過2/3,則發出pre-vote投給blockX,切換到藍色外圈;如果空塊和blockX各自的票數,都沒有超過2/3,那么發出pre-vote nil 訊息投票給空塊,進入pre-commit階段,依舊在紅色內圈,

一旦A發出了pre-commit nil的投票訊息,A還是留在紅色內圈回圈,pre-commit流程與上面類似,總而言之,紅色內圈的流程,需要假設網路是半同步的,

簡言之,每輪開始提議弱同步,之后投票完全異步

tendermint和傳統PBFT的比較

  1. Tendermint沒有pBFT那種View Change階段,Tendermint很巧妙的把超時的情況,跟普通情況融合成了統一的形式,都是 propose->pre-vote->pre-commit 三階段,只是超時的時候新塊是一個特殊的空塊,切換proposer是通過提交commit空塊來觸發的,而pBFT是有一個單獨的view change程序來觸發primary輪換,
  2. Tendermint的所有資訊都存盤在blockchain里,因為pBFT是1999年提出來的,那時候還沒有blockchain這個東西(blockchain是2009年位元幣出現之后才有的),因此 pBFT的所有節點雖有有一致的資料,但資料是分散存放的,Blockchain就是一個分布式資料庫,好比在MySQL這類DBMS資料庫沒出現之前,人們都是把資料寫入檔案然后存在硬碟上,發明出各種奇怪的檔案格式和組織方式,有了MySQL后,管理資料就方便多了,同理,Tendermint 把資料全部存入blockchain, pBFT沒有blockchain這樣一個分布式資料庫,所有全節點需要自己在硬碟上管理資料,比如為了壓縮訊息日志,丟棄老的訊息,節省硬碟空間,引入了checkpoint的概念,光是資料管理這一塊就多了很多繁瑣的步驟

股權

驗證者在共識協議中可能具有不同的投票“權重”, 因此,Tendermint并不關注驗證者數目的1/3或2/3, 而是關注總投票權的比例,此外,這個比例可能不是在各個驗證者中均勻分布的,

驗證者持有的貨幣可以系結到保證金中,并且如果發現它們在共識協議中行為不當,則可以將其銷毀, 這為協議的安全性增加了一個經濟因素,當拜占庭節點小于三分之一的假設被打破時,人們可以量化產生的代價,

波爾卡(Polka):對提議區塊的預投票數量超過2/3,對應圖中兩個人跳舞的地方
什么時候鎖:驗證者為某一輪的區塊預提交,則鎖定在該輪的區塊上,鎖定的驗證者只能為鎖定的區塊預提交,不能為其他區塊預投票和預提交
什么時候解鎖:當出現一個波爾卡,則解鎖

加入Lock)主要是用于避免在同一高度的不同輪提交不同的區塊,
舉個例子:考慮4個驗證者A,B,C,D,假設有一個第R輪關于blockX的提議,現在假設blockX已經有一個波爾卡,但是A看不見它,預提交(pre-commit)為空,然而其他人對blockX進行了預提交,進一步假設只有D看見了所有的預提交,然而其他人并沒有看見D的預提交(他們只看見他們的預提交和A的空預提交),D現在將要提交(commit)這個區塊,然而其他人進入到R+1輪,由于任何驗證者都可能是新的提議者,如果ABC提議并投票了一個新的區塊blockY,他們可能達成共識并提交這個區塊,可是D已經提交了bockX,因此損害了系統的安全性,注意,這里并沒有任何拜占庭行為,僅僅是不同時性,
解決了這個問題通過強迫驗證者粘附在他們預提交(pre-commit)的區塊上,因為其他的驗證者可能居于這個預提交進行了提交(如上例中的D),本質上,在任何一個節點一旦存在超過2/3預提交(pre-commit),整個網路被鎖定在這個區塊上,也就是說在下一輪中無法產生一個不同塊的波爾卡,這是預投票鎖的直接動機,
每一個pre-commit預提交)都必須由同一輪的波爾卡(polka)來證明,

問題:

  1. 為什么不能用區塊編號來區磁區塊,最終只提交統計超過2/3投票的區塊?
    原因:tendermint不存在弱中心來統計投票確認的數量
  2. 假設驗證者全為非拜占庭節點,超過2/3的節點預投票后,1/3~2/3的節點預提交(預投票的節點網路出現問題掉線),剩下的的節點無法產生波爾卡,如何解鎖??
  3. 為什么會產生多輪,怎樣會觸發新的一輪?
    答:提議節點掉線、無效塊、prevote和precommit票數不夠2/3

提議者的選舉

滿足必要要求Rx和可選要求Ox:
R1:Determinism
在分布式系統中,對于同一高度同一輪,兩個誠實節點生成的提議者是一樣的(原文的process不知道是啥)

proposer_p(h,r) = proposer_q(h,r)

where proposer_p(h,r) is the proposer returned by the Proposer Selection Procedure at process p, at height h and round r.

R2:Fairness
根據權重盡可能地“公平”

Given a validator set with total voting power P and a sequence S of elections. In any sub-sequence of S with length C*P, a validator v must be elected as proposer P/VP(v) times, i.e. with frequency:

f(v) ~ VP(v) / P

where C is a tolerance factor for validator set changes with following values:

C == 1 if there are no validator set changes
C ~ k when there are validator changes

演算法

  • 所有地驗證者根據股權向前移動:通過投票權提升優先級
  • 優先級佇列的第一個被選為區塊提議者
  • 向后移動區塊提議者:通過總投票權降低優先級

節點集在這里插入圖片描述
演算法流程圖
在這里插入圖片描述

節點集更改

1.投票權更改

依然按照原有演算法進行

2.驗證者缺失

為了是優先級總和保持為0,在原有演算法上增添一步:每個驗證者的優先級減去平均優先級
在這里插入圖片描述
在這里插入圖片描述

3.驗證者增添

首先,添加的驗證者V的初始優先級為:

A(V) = -1.125*P,P為包括V投票權的總投票權

然后每個驗證者再次減去平均優先級
在這里插入圖片描述
A(p3)=-1.125*(1+3+8) ≈ \approx -13

在這里插入圖片描述
提議者選擇的參考鏈接:Proposer selection procedure in Tendermint

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/169571.html

標籤:其他

上一篇:CC:移動語意

下一篇:Oracle學習筆記三:資料庫創建及SQL Developer連接

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:33:24 more
  • MySQL中binlog備份腳本分享

    關于MySQL的二進制日志(binlog),我們都知道二進制日志(binlog)非常重要,尤其當你需要point to point災難恢復的時侯,所以我們要對其進行備份。關于二進制日志(binlog)的備份,可以基于flush logs方式先切換binlog,然后拷貝&壓縮到到遠程服務器或本地服務器 ......

    uj5u.com 2023-04-20 08:28:06 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:27:27 more
  • 快取與資料庫雙寫一致性幾種策略分析

    本文將對幾種快取與資料庫保證資料一致性的使用方式進行分析。為保證高并發性能,以下分析場景不考慮執行的原子性及加鎖等強一致性要求的場景,僅追求最終一致性。 ......

    uj5u.com 2023-04-20 08:26:48 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:26:35 more
  • 云時代,MySQL到ClickHouse資料同步產品對比推薦

    ClickHouse 在執行分析查詢時的速度優勢很好的彌補了MySQL的不足,但是對于很多開發者和DBA來說,如何將MySQL穩定、高效、簡單的同步到 ClickHouse 卻很困難。本文對比了 NineData、MaterializeMySQL(ClickHouse自帶)、Bifrost 三款產品... ......

    uj5u.com 2023-04-20 08:26:29 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:25:13 more
  • Redis 報”OutOfDirectMemoryError“(堆外記憶體溢位)

    Redis 報錯“OutOfDirectMemoryError(堆外記憶體溢位) ”問題如下: 一、報錯資訊: 使用 Redis 的業務介面 ,產生 OutOfDirectMemoryError(堆外記憶體溢位),如圖: 格式化后的報錯資訊: { "timestamp": "2023-04-17 22: ......

    uj5u.com 2023-04-20 08:24:54 more
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:24:03 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:23:11 more