主頁 > 前端設計 > Redis——Redis集群理論

Redis——Redis集群理論

2020-10-04 22:40:19 前端設計

Redis——Redis集群理論

文章目錄

  • Redis——Redis集群理論
    • 一、為什么需要搭建 Redis 集群
      • 1、單點故障
      • 2、容量有限
      • 3、壓力過大
    • 二、AKF服務拆分原則
      • 1、X軸水平擴展
      • 2、Y軸服務拆分
      • 3、Z軸資料磁區
    • 三、基于AKF的Redis集群
      • 1、水平擴展
      • 2、縱向擴展
    • 四、集群的問題——資料一致性
      • 1、強一致性
      • 2、弱一致性
      • 3、最終一致性

一、為什么需要搭建 Redis 集群

在前面的文章中,我們已經學習過 Redis 在單機情況下,Redis 的常見應用:

  • 快取
  • 資料庫

如果是當作快取的時候,當服務掛掉重啟的時候,我們可以重啟一個新的實體,里面什么資料都沒有,這樣的話請求將會穿透快取,直接請求到資料庫,然后慢慢把熱資料加載到快取;也可以在重啟 Redis 服務的時候,就把百分之七八十的熱資料加載到快取,這樣就涉及到單機本地的持久化,因為是快取,允許部分資料丟失,所以使用 RDB 持久化就夠了,根據 dump.rdb 就能夠很快的恢復大量熱資料,對外提供服務

如果是當作資料庫的話,就需要保證資料不可丟失,就需要使用 RDB以快斬訓者 AOF 以日志方式進行持久化,以增量日志的方式保證資料不丟失,4.0 以后 AOF 以混合模式進行存盤,前半部分是 RDB,后面以追加寫的方式保存日志

那么為什么生產中需要搭建集群?一定是單機情況下,有些問題是無法解決的,那么單機、單節點、單實體會有什么問題?單機的 Redis 服務通常會有以下風險:

  • 單點故障
  • 容量有限
  • 壓力過大

1、單點故障

由于只有一個 Redis 行程對外提供服務,一旦服務器出現斷電、宕機、卡死等等的意外問題,系統中就無法使用 Redis 快取服務,這樣大量請求就會大量到達資料庫,而資料庫存盤于磁盤,回應速度極慢,而且容易造成資料庫崩潰

簡單來說就是容易造成服務不可用,這在上線的生產環境中是不允許的

2、容量有限

如果一個特別大的系統,如淘寶、12306,資料特別多,資料量特別大,一個 Redis 服務 hold 住嗎?存的下嗎?

所以單機 Redis 服務的另一個問題就是容量有限,稍微大一點的系統,一個 Redis 服務無法支撐起來

3、壓力過大

由于只有一個 Redis 單機服務,則這個 Redis 行程將要處理所有的 client 端請求,以及所有的查詢、修改操作,無論是大量的連接帶來的 socket 壓力,還是 CPU 的密集型操作壓力,都會造成 Redis 服務行程壓力過大

那么怎么解決單機的問題呢?我們可以通過搭建多臺 Redis 服務,共同對外提供服務,減輕單臺壓力

二、AKF服務拆分原則

在《架構即未來》這本書,里面提到的AKF擴展立方體,是業界公認的微服務拆分原則的最佳實踐,其核心思想就是:通過加機器可以解決容量和可用性問題(如果一臺不行就兩臺)

用個段子描述就是:在重慶沒有什么事是一頓火鍋解決不了的,如果有,那就兩頓

既然是立方體,那么這是一個三維的模型,分別包含X,Y,Z軸,三個不同維度相輔相成,示意圖如下:

在這里插入圖片描述

1、X軸水平擴展

所謂 X 軸代表把同樣的作業或資料鏡像分配給多個物體,換句話說就是復制服務然后負載均衡,使單臺服務壓力降低,而且單臺服務掛掉之后,其他的服務能夠頂上來,提高容錯性

豪橫一點的說法就是:“我有錢,我就加機器來解決問題”

例子:

我有個網站,一開始部署在服務器A上對外服務,隨著訪問人數增加,一臺服務其的性能無法支持,于是我又在服務器上B上同樣部署了網站,然后在前面部署了Apache或者Nginx來分流訪問,這就是最基本的X軸擴展

但是基于 X 軸擴展,每臺服務器都是存盤全量資料,在資料量很大的系統中,每臺機器容量有限,壓力很大

2、Y軸服務拆分

針對X軸擴展產生的問題,我們需要將大型服務進行拆解,把分割的作業指責和資料分配個多個物體,這也就是Y軸擴展,也是微服務理論誕生的基礎,

每個服務實作一組相關的功能,如訂單管理,客戶管理等,在工程上常見的方案是服務化架構(SOA),比如對于一個電子商務平臺,我們可以做如下拆分:

在這里插入圖片描述

這樣進行拆分的話,當其中一個服務掛掉之后,不會影響其他服務正常對外提供服務

3、Z軸資料磁區

Z 軸擴展通常是指基于請求和用戶獨特的需求,進行系統劃分,并使得劃分出來的子系統相互隔離,但又是完整的

Z軸代表按照客戶、客戶的需要、位置或者價值分割或分配作業指責,一般在超大型系統中,架構設計就會面臨Z軸擴展的需求,

三、基于AKF的Redis集群

Redis 集群模型:

在這里插入圖片描述

1、水平擴展

既然一臺 Redis 服務行程對外提供服務容易造成單點故障,那就使用多臺服務器,每臺服務器存放的資料相互之間實時同步,保證每臺機器里面的都是全量資料,這樣,當其中一個服務行程實體掛掉之后,其余行程實體能夠繼續對外提供服務

而且既然起了多臺服務,就不要浪費性能,可以讓多個行程實體組成主從關系,實作讀寫分離,減輕單臺主機壓力

2、縱向擴展

使用多臺主機雖然能夠避免單點故障,而且能夠組成讀寫分離,減輕單臺服務器接收全部請求的壓力,但是每臺服務器都是保存的全量資料,當系統膨脹,資料量變大之后容量仍然是一個問題

此時我們可以把資料按照不同的功能進行劃分,不同業務的資料保存在不同的服務行程,對外只提供此業務功能,這樣每臺服務就不需要保存全量資料,解決單臺服務容量有限的問題,而且根據功能可以讓請求打到不同的服務器,減輕單臺服務器接收過多請求的壓力

四、集群的問題——資料一致性

雖然水平擴展能夠解決單點故障的問題,但是每臺機器中都需要進行資料同步,當主服務器接收到修改資料請求時,各個從屬服務器也需要進行資料修改,保證資料一致性

保證資料一致性,可以分為以下情況

1、強一致性

強一致性:使用同步阻塞方式,所有節點阻塞直到資料全部一致

強一致性一直是企業所追求的情況,但是成本極其高昂,而且容易造成服務不可用

在這里插入圖片描述

總結:強一致性容易破壞可用性,與我們使用集群解決單點故障的初衷背道而馳,不可取

2、弱一致性

弱一致性:使用異步方式,主服務器不需要等待從服務器執行結果,就可以給客戶端回應成功

弱一致性會造成資料丟失,資料不一致會產生大問題

在這里插入圖片描述

3、最終一致性

最終一致性:在主從之間通過一個可靠的訊息組件,實作資料最終一定會一致

最終一致性可以有多種實作方式,如 kafka 等訊息佇列,但是在資料實作最終一致性之前,有可能請求到的資料并非最新的資料

在這里插入圖片描述

這一種看起來還不錯,但是 Redis 也并沒有采用這種方式

Redis 最大的特點就是快,玩命的給客戶提供最快的回應速度,所以一定要盡量的減少技術的整合


本篇文章只是通過講解 Redis 單機會出現什么問題,來引出為什么需要搭建 Redis 集群,Redis 集群內容很多,如果在本篇文章中講解就會顯得主次不分,內容冗長,所以我們在后面的文章中將會通過以下兩個方面來詳細介紹 Redis 集群:

  • X軸水平擴展:對 master 做HA高可用,解決單點故障問題
  • Y軸縱向擴展:通過集群對資料進行分治,解決單臺機器容量有限問題

關聯文章:

Redis入門–萬字長文詳解epoll

Redis——詳解五種資料結構

Redis——Redis的進階使用(管道/發布訂閱/事務/布隆過濾器)

Redis——Redis用作快取(記憶體回收/穿透/擊穿/雪崩)

Redis——Redis用作資料庫(持久化/RDB/AOF)

轉載請註明出處,本文鏈接:https://www.uj5u.com/qianduan/155735.html

標籤:其他

上一篇:資訊化實戰展示系列2**市**區辦公云平臺

下一篇:單體架構,分布式系統的差別在哪里?

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • vue移動端上拉加載

    可能做得過于簡單或者比較low,請各位大佬留情,一起探討技術 ......

    uj5u.com 2020-09-10 04:38:07 more
  • 優美網站首頁,頂部多層導航

    一個個人用的瀏覽器首頁,可以把一下常用的網站放在這里,平常打開會比較方便。 第一步,HTML代碼 <script src=https://www.cnblogs.com/szharf/p/"js/jquery-3.4.1.min.js"></script> <div id="navigate"> <ul> <li class="labels labels_1"> ......

    uj5u.com 2020-09-10 04:38:47 more
  • 頁面為要加<!DOCTYPE html>

    最近因為寫一個js函式,需要用到$(window).height(); 由于手寫demo的時候,過于自信,其實對前端方面的認識也不夠體系,用文本檔案直接敲出來的html代碼,第一行沒有加上<!DOCTYPE html> 導致了$(window).height();的結果直接是整個document的高 ......

    uj5u.com 2020-09-10 04:38:52 more
  • WordPress網站程式手動升級要做好資料備份

    WordPress博客網站程式在進行升級前,必須要做好網站資料的備份,這個問題良家佐言是遇見過的;在剛開始接觸WordPress博客程式的時候,因為升級問題和博客網站的修改的一些嘗試,良家佐言是吃盡了苦頭。因為購買的是西部數碼的空間和域名,每當佐言把自己的WordPress博客網站搞到一塌糊涂的時候 ......

    uj5u.com 2020-09-10 04:39:30 more
  • WordPress程式不能升級為5.4.2版本的原因

    WordPress是一款個人博客系統,受到英文博客愛好者和中文博客愛好者的追捧,并逐步演化成一款內容管理系統軟體;它是使用PHP語言和MySQL資料庫開發的,用戶可以在支持PHP和MySQL資料庫的服務器上使用自己的博客。每一次WordPress程式的更新,就會牽動無數WordPress愛好者的心, ......

    uj5u.com 2020-09-10 04:39:49 more
  • 使用CSS3的偽元素進行首字母下沉和首行改變樣式

    網頁中常見的一種效果,首字改變樣式或者首行改變樣式,效果如下圖。 代碼: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <meta name="viewport" content="width=device-width, ......

    uj5u.com 2020-09-10 04:40:09 more
  • 關于a標簽的講解

    什么是a標簽? <a> 標簽定義超鏈接,用于從一個頁面鏈接到另一個頁面。 <a> 元素最重要的屬性是 href 屬性,它指定鏈接的目標。 a標簽的語法格式:<a href=https://www.cnblogs.com/summerxbc/p/"指定要跳轉的目標界面的鏈接">需要展示給用戶看見的內容</a> a標簽 在所有瀏覽器中,鏈接的默認外觀如下: 未被訪問的鏈接帶 ......

    uj5u.com 2020-09-10 04:40:11 more
  • 前端輪播圖

    在需要輪播的頁面是引入swiper.min.js和swiper.min.css swiper.min.js地址: 鏈接:https://pan.baidu.com/s/15Uh516YHa4CV3X-RyjEIWw 提取碼:4aks swiper.min.css地址 鏈接:https://pan.b ......

    uj5u.com 2020-09-10 04:40:13 more
  • 如何設定html中的背景圖片(全屏顯示,且不拉伸)

    1 <style>2 body{background-image:url(https://uploadbeta.com/api/pictures/random/?key=BingEverydayWallpaperPicture); 3 background-size:cover;background ......

    uj5u.com 2020-09-10 04:40:16 more
  • Java學習——HTML詳解(上)

    HTML詳解 初識HTML Hyper Text Markup Language(超文本標記語言) 1 <!--DOCTYPE:告訴瀏覽器我們要使用什么規范--> 2 <!DOCTYPE html> 3 <html lang="en"> 4 <head> 5 <!--meta 描述性的標簽,描述一些 ......

    uj5u.com 2020-09-10 04:40:33 more
最新发布
  • 我的第一個NPM包:panghu-planebattle-esm(胖虎飛機大戰)使用說明

    好家伙,我的包終于開發完啦 歡迎使用胖虎的飛機大戰包!! 為你的主頁添加色彩 這是一個有趣的網頁小游戲包,使用canvas和js開發 使用ES6模塊化開發 效果圖如下: (覺得圖片太sb的可以自己改) 代碼已開源!! Git: https://gitee.com/tang-and-han-dynas ......

    uj5u.com 2023-04-20 07:59:23 more
  • 生產事故-走近科學之消失的JWT

    入職多年,面對生產環境,盡管都是小心翼翼,慎之又慎,還是難免捅出簍子。輕則滿頭大汗,面紅耳赤。重則系統停擺,損失資金。每一個生產事故的背后,都是寶貴的經驗和教訓,都是專案成員的血淚史。為了更好地防范和遏制今后的各類事故,特開此專題,長期更新和記錄大大小小的各類事故。有些是親身經歷,有些是經人耳傳口授 ......

    uj5u.com 2023-04-18 07:55:04 more
  • 記錄--Canvas實作打飛字游戲

    這里給大家分享我在網上總結出來的一些知識,希望對大家有所幫助 打開游戲界面,看到一個畫面簡潔、卻又富有挑戰性的游戲。螢屏上,有一個白色的矩形框,里面不斷下落著各種單詞,而我需要迅速地輸入這些單詞。如果我輸入的單詞與螢屏上的單詞匹配,那么我就可以獲得得分;如果我輸入的單詞錯誤或者時間過長,那么我就會輸 ......

    uj5u.com 2023-04-04 08:35:30 more
  • 了解 HTTP 看這一篇就夠

    在學習網路之前,了解它的歷史能夠幫助我們明白為何它會發展為如今這個樣子,引發探究網路的興趣。下面的這張圖片就展示了“互聯網”誕生至今的發展歷程。 ......

    uj5u.com 2023-03-16 11:00:15 more
  • 藍牙-低功耗中心設備

    //11.開啟藍牙配接器 openBluetoothAdapter //21.開始搜索藍牙設備 startBluetoothDevicesDiscovery //31.開啟監聽搜索藍牙設備 onBluetoothDeviceFound //30.停止監聽搜索藍牙設備 offBluetoothDevi ......

    uj5u.com 2023-03-15 09:06:45 more
  • canvas畫板(滑鼠和觸摸)

    <!DOCTYPE html> <html> <head> <meta charset="utf-8"> <title>canves</title> <style> #canvas { cursor:url(../images/pen.png),crosshair; } #canvasdiv{ bo ......

    uj5u.com 2023-02-15 08:56:31 more
  • 手機端H5 實作自定義拍照界面

    手機端 H5 實作自定義拍照界面也可以使用 MediaDevices API 和 <video> 標簽來實作,和在桌面端做法基本一致。 首先,使用 MediaDevices.getUserMedia() 方法獲取攝像頭媒體流,并將其傳遞給 <video> 標簽進行渲染。 接著,使用 HTML 的 < ......

    uj5u.com 2023-01-12 07:58:22 more
  • 記錄--短視頻滑動播放在 H5 下的實作

    這里給大家分享我在網上總結出來的一些知識,希望對大家有所幫助 短視頻已經無數不在了,但是主體還是使用 app 來承載的。本文講述 H5 如何實作 app 的視頻滑動體驗。 無聲勝有聲,一圖頂百辯,且看下圖: 網址鏈接(需在微信或者手Q中瀏覽) 從上圖可以看到,我們主要實作的功能也是本文要講解的有: ......

    uj5u.com 2023-01-04 07:29:05 more
  • 一文讀懂 HTTP/1 HTTP/2 HTTP/3

    從 1989 年萬維網(www)誕生,HTTP(HyperText Transfer Protocol)經歷了眾多版本迭代,WebSocket 也在期間萌芽。1991 年 HTTP0.9 被發明。1996 年出現了 HTTP1.0。2015 年 HTTP2 正式發布。2020 年 HTTP3 或能正... ......

    uj5u.com 2022-12-24 06:56:02 more
  • 【HTML基礎篇002】HTML之form表單超詳解

    ??一、form表單是什么

    ??二、form表單的屬性

    ??三、input中的各種Type屬性值

    ??四、標簽 ......

    uj5u.com 2022-12-18 07:17:06 more