主頁 > 軟體設計 > 『MongoDB』MongoDB部署架構——復制集篇(Replica Set)

『MongoDB』MongoDB部署架構——復制集篇(Replica Set)

2021-12-28 07:51:26 軟體設計

目錄

  • 一、復制集機制及原理
    • 1 復制集的作用
    • 2 典型復制集結構
    • 3 資料是如何復制的?
    • 4 通過選舉完成故障恢復
    • 5 影響選舉的因素
    • 6 復制集節點常見選項
    • 7 復制集注意事項
  • 二、搭建 MongoDB 復制集
    • 1 搭建準備
    • 2 復制集節點創建
      • 2.1 在Linux原生環境下搭建
        • 2.1.1 創建資料目錄
        • 2.1.2 準備組態檔
        • 2.1.3 啟動 MongoDB 行程
      • 2.2 在Windows下搭建
        • 2.2.1 創建資料目錄
        • 2.2.2 準備組態檔
        • 2.2.3 啟動 MongoDB 行程
    • 3 配置復制集
    • 4 驗證

一、復制集機制及原理

1 復制集的作用

  • MongoDB 復制集的主要意義在于實作服務高可用

  • 它的現實依賴于兩個方面的功能:
    1.資料寫入時將資料迅速復制到另一個獨立節點上
    2.在接受寫入的節點發生故障時自動選舉出一個新的替代節點

  • 在實作高可用的同時,復制集實作了其他幾個附加作用:
    1.資料分發:將資料從一個區域復制到另一個區域,減少另一個區域的讀延遲
    2.讀寫分離:不同型別的壓力分別在不同的節點上執行
    3.異地容災:在資料中心故障時候快速切換到異地

2 典型復制集結構

  • 一個典型的復制集由3個以上具有投票權的節點組成,包括:
  1. 一個主節點(PRIMARY):接受寫入操作和選舉時投票
  2. 兩個(或多個)從節點(SECONDARY):復制主節點上的新資料和選舉時投票
  3. 不推薦使用 Arbiter(投票節點/仲裁節點)
    在這里插入圖片描述

3 資料是如何復制的?

  • 當一個修改操作,無論是插入、更新或洗掉,到達主節點時,它對資料的操作將被記錄下來(經過一些必要的轉換),這些記錄稱為 oplog,

  • 從節點通過在主節點上打開一個 tailable 游標不斷獲取新進入主節點的 oplog,并在自己的資料上回放,以此保持跟主節點的資料一致,

在這里插入圖片描述

4 通過選舉完成故障恢復

  • 具有投票權的節點之間兩兩互相發送心跳;
  • 5次心跳未收到時判斷為節點失聯;
  • 如果失聯的是主節點,從節點會發起選舉,選出新的主節點;
  • 如果失聯的是從節點則不會產生新的選舉;
  • 選舉基于 RAFT一致性演算法 實作,選舉成功的必要條件是大多數投票節點存活;
  • 復制集中最多可以有50個節點,但具有投票權的節點最多7個

在這里插入圖片描述

5 影響選舉的因素

  • 整個集群必須有大多數節點存活;

  • 被選舉為主節點的節點必須:

  1. 能夠與多數節點建立連接
  2. 具有較新的 oplog
  3. 具有較高的優先級(如果有配置)

6 復制集節點常見選項

  • 是否具有投票權(v 引數):有則參與投票;
  • 優先級(priority 引數):優先級越高的節點越優先成為主節點,優先級為0的節點無法成為主節點;
  • 隱藏(hidden 引數):復制資料,但對應用不可見,隱藏節點可以具有投票僅,但優先級必須為0;
  • 延遲(slaveDelay 引數):復制 n 秒之前的資料,保持與主節點的時間差,

在這里插入圖片描述

7 復制集注意事項

  • 關于硬體:
    因為正常的復制集節點都有可能成為主節點,它們的地位是一樣的,因此硬體配置上盡可能一致;
    為了保證節點不會同時宕機,各節點使用的硬體必須具有獨立性,

  • 關于軟體:
    復制集各節點軟體版本必須一致,以避免出現不可預知的問題,

  • 增加節點不會增加系統寫性能!!!


二、搭建 MongoDB 復制集

搭建目標
本實驗中,我將通過在一臺機器上運行3個實體來搭建一個最簡單的復制集,我將會帶展示以下幾點:

  • 如何啟動一個 MongoDB 實體
  • 如何將3個 MongoDB 實體搭建成一個復制集
  • 如何對復制集運行引數做一些常規調整

1 搭建準備

  • 安裝最新的 MongoDB 版本

  • Windows 系統請事先配置好 MongoDB 可執行檔案的環境變數

  • Linux 和 Mac 系統請配置 PATH 變數

  • 確保有 10GB 以上的硬碟空間

2 復制集節點創建

MongoDB 啟動時將使用一個資料目錄存放所有資料檔案,我們將為3個復制集節點創建各自的資料目錄,

2.1 在Linux原生環境下搭建

2.1.1 創建資料目錄

  • mkdir -p /data/db{1,2,3}

2.1.2 準備組態檔

復制集的每個mongod行程應該位于不同的服務器,現在在一臺機器上運行3個行程,因此要為它們各自配置:

  • 不同的埠,示例中將使用28017/28018/28019

  • 不同的資料目錄,示例中將使用:
    /data/db1
    /data/db2
    /data/db3

  • 不同日志檔案路徑,示例中將使用:
    /data/db1/mongod.log
    /data/db2/mongod.log
    /data/db3/mongod.log

  • 在相應的資料目錄下創建以下mongod.conf檔案,注意:#注釋的代表那行是需要修改的

# /data/db1/mongod.conf  
systemLog:
	destination: file
	path: /data/db1/mongod.log # log path
	logAppend: true
storage:
	dbPath: /data/db1 # data directory
net:
	bindIp: 0.0.0.0  port: 28017	# port
replication:
	replSetName: rs0
processManagement:
	fork: true

2.1.3 啟動 MongoDB 行程

mongod -f /data/db1/mongod.conf  
mongod -f /data/db2/mongod.conf  
mongod -f /data/db3/mongod.conf

注意:如果啟用了 SELinux,可能阻止上述行程啟動,簡單起見請關閉 SELinux,

如果以上步驟都已完成,那么離成功就差一小步了,跳到第三點查看復制集的配置,

2.2 在Windows下搭建

2.2.1 創建資料目錄

  • md c:\data\db1
  • md c:\data\db2
  • md c:\data\db3

2.2.2 準備組態檔

復制集的每個mongod行程應該位于不同的服務器,現在在一臺機器上運行3個行程,因此要為它們各自配置:

  • 不同的埠,示例中將使用28017/28018/28019

  • 不同的資料目錄,示例中將使用:
    c:\data\db1
    c:\data\db2
    c:\data\db3

  • 不同日志檔案路徑,示例中將使用:
    c:\data\db1\mongod.log
    c:\data\db2\mongod.log
    c:\data\db3\mongod.log

  • 在相應的資料目錄下創建以下mongod.conf檔案,注意:#注釋的代表那行是需要修改的

# c:\data\db1\mongod.conf  
systemLog:
	destination: file
	path: c:\data1\mongod.log  # 日志檔案路徑
	logAppend: true
storage:
	dbPath: c:\data1 # 資料目錄
net:
	bindIp: 0.0.0.0
	port: 28017	# 埠
replication: 
	 replSetName: rs0

2.2.3 啟動 MongoDB 行程

mongod -f c:\data1\mongod.conf  
mongod -f c:\data2\mongod.conf  
mongod -f c:\data3\mongod.conf

因為 Windows 不支持 fork,以上命令需要在3個不同的視窗執行,執行后不可關閉視窗否則行程將直接結束,

3 配置復制集

# mongo --port 28017
> rs.initiate({
	_id: "rs0",  members: [{
		_id: 0,
		host: "localhost:28017"
		},{
		_id: 1,
		host: "localhost:28018"
		},{
		_id: 2,
		host: "localhost:28019"
}]

4 驗證

  • MongoDB 主節點進行寫入
# mongo localhost:28017
> db.test.insert({ a:1 })
> db.test.insert({ a:2 });
  • MongoDB 從節點進行讀
# mongo localhost:28018
> rs.slaveOk()
> db.test.find()

在這里插入圖片描述

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/395085.html

標籤:其他

上一篇:Android 架構設計(三):三方框架推薦

下一篇:K8s架構|全面整理K8s的架構介紹

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more