主頁 > 軟體設計 > 讀發布!設計與部署穩定的分布式系統(第2版)筆記08_自黑與放大

讀發布!設計與部署穩定的分布式系統(第2版)筆記08_自黑與放大

2023-06-22 08:06:50 軟體設計

1. 自黑式攻擊

1.1. 自黑只會偶爾成為人類的美德

1.2. 對系統來說,絕對不會推崇自黑

1.3. “自黑式攻擊”是指系統或有人類參與的擴展系統聯合外部對自身發起攻擊

1.4. 好的營銷可以隨時殺死你

1.4.1. 并不是每個自黑的“傷口”,都可以歸咎于營銷部門

1.5. 典型例子

1.5.1. 公司市場部發出的致“精選用戶組”的一份郵件

1.5.2. 該郵件包含一些特權或優惠資訊,其復制速度比木馬病毒快得多

1.5.3. 定價錯誤使得一個SKU的訂購次數等于其他所有產品的訂購總數

1.5.4. 在基于ATG的基礎設施中,鎖管理器總是會處理分布式鎖管理,以確保快取的一致性

1.5.4.1. 鎖管理器資源只有一個,隨著網站橫向擴展,鎖管理器會成為瓶頸,并且最侄訓成為風險

1.5.4.2. 如果一個熱門專案被無意修改,最終就可能會導致數以百計的服務器上出現數千個請求處理的執行緒,都在排隊等待該專案的寫入鎖

2. 共享資源

2.1. 以面向服務的架構或“公共服務”專案為幌子,共享資源會成為水平擴展層級所有成員都需要使用的某個設施

2.2. 可以是集群管理器或鎖管理器

2.3. 當共享資源流量過載時,它會成為限制系統容量的瓶頸

2.4. 當共享資源有冗余且是非獨占的時,就沒有問題

2.4.1. 可以同時為多個消費者提供服務

2.5. 最具擴展性的架構是無共享架構

2.5.1. 在無共享架構中,系統容量與服務器的數量幾乎呈線性關系

2.5.2. 無共享架構的問題在于,它會犧牲故障轉移來獲得更好的擴展性

2.5.3. 通過減少共享資源的扇入個數,可以近似實作無共享架構,即減少呼叫共享資源的服務器

3. 避免自黑式攻擊

3.1. 構建無共享架構

3.1.1. 在無共享架構中,每臺服務器在不知道任何其他服務器的情況下,仍然能夠運行

3.1.2. 服務器不共享資料庫、集群管理器或任何其他資源,這是水平擴展的理想狀態

3.1.3. 通過中間件模式減少過量請求造成的影響,或盡量通過冗余和后端同步協議,實作共享資源本身的水平擴展

3.1.4. 當共享資源不可用或沒有回應時,還可以為系統設計一個后備模式

3.1.5. 如果提供悲觀鎖的鎖管理器不可用,那么應用程式可以進入后備模式并使用樂觀鎖

3.2. 保護共享資源

3.2.1. 當流量激增時,編程錯誤、意外的放大效應和共享資源都會產生風險

3.2.2. 前端負載的增加,會導致后端處理量呈指數級增長

3.3. 預留一部分基礎設施,或整備一些新的云資源,用于應對商業促銷或流量激增

3.4. 當訪問流量激增時,可以使用自動化擴展技術

3.4.1. 注意服務器啟動的延遲時間

3.5. 保持溝通渠道暢通

3.5.1. 應對人為的攻擊,關鍵在于培訓、教育和溝通

3.6. 快速地重新分配實惠的優惠

3.6.1. 任何一個認為能限量發布特惠商品的人,都在自找麻煩

3.6.2. 根本就沒有限量分配這回事

3.6.3. 即使限制了一個超劃算的特惠商品可以購買的次數,系統仍然會崩潰

4. 放大效應

4.1. 生物學中的平方-立方定律

4.1.1. 蟲子的重量隨著體積增加而增加,符合時間復雜度O(n^3)

4.1.2. 蟲子的腿部力量會隨腿的橫截面積的增加而增加,符合時間復雜度O(n^2)

4.1.3. 如果讓蟲子增大為原來的10倍,那么變大后的蟲子的“力量與體重”之比就會變成原來的1/10

4.1.4. 蟲子的腿根本支撐不了10倍大的個頭

4.2. “多對一”或“多對少”的關系

4.2.1. 如果這個關系中一方的規模增大,另一方就會受到放大效應的影響

4.2.2. 由于開發環境和測驗環境的規模很少會與生產環境一致,因此很難在前兩個環境中,看到放大效應跳出來“咬人”

4.2.3. 1臺資料庫服務器被10臺機器呼叫時,可以很好地運行

4.2.4. 呼叫它的機器數量再額外添加50臺時,資料庫服務器就可能會崩潰

5. 點對點通信

5.1. 放大效應“咬人最兇”的情況

5.2. 當只有一兩個實體進行通信時,機器之間的點對點通信可能作業得很好

5.3. 每個實體必須直接與其他實體進行溝通,連接的總數,會以實體數量平方的數量級上升

5.4. 連接數會擴展到時間復雜度O(n^2)

5.5. 務必將單個服務內的點對點通信,與服務之間的點對點通信區分開

5.6. 除非是微軟或谷歌這樣的公司,其他公司不可能構建與生產環境相同大小的測驗農場

5.6.1. 這種型別的軟體缺陷是不可能被測驗出來的,必須通過設計來避免

5.6.2. 參照測驗環境檢查生產環境,以發現放大效應

5.7. 替換方式

5.7.1. UDP廣播

5.7.1.1. 廣播能夠應對服務器數量的不斷增長,但它不節省帶寬

5.7.1.2. 與廣播訊息不相關的服務器產生一些額外的負載

5.7.2. TCP或UDP組播

5.7.2.1. 只允許相關的服務器接收訊息,傳送效率更高

5.7.3. 發布-訂閱訊息傳遞

5.7.3.1. 服務器在訊息發送的那一刻沒有監聽,也可以收到訊息

5.7.3.2. 傳遞的效率也較高

5.7.3.3. 通常會讓基礎設施成本大增

5.7.4. 訊息佇列

5.7.5. 在所有可行的方案中,選擇最簡單的那個來做

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/555793.html

標籤:其他

上一篇:驅動開發:內核注冊表增刪改查

下一篇:返回列表

標籤雲
其他(161478) Python(38244) JavaScript(25512) Java(18251) C(15238) 區塊鏈(8271) C#(7972) AI(7469) 爪哇(7425) MySQL(7260) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5875) 数组(5741) R(5409) Linux(5347) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4606) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2436) ASP.NET(2404) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1984) HtmlCss(1971) 功能(1967) Web開發(1951) C++(1942) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1881) .NETCore(1863) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 讀發布!設計與部署穩定的分布式系統(第2版)筆記08_自黑與放大

    ![](https://img2023.cnblogs.com/blog/3076680/202306/3076680-20230621151546278-1606324122.png) # 1. 自黑式攻擊 ## 1.1. 自黑只會偶爾成為人類的美德 ## 1.2. 對系統來說,絕對不會推崇自黑 ......

    uj5u.com 2023-06-22 08:06:50 more
  • 驅動開發:內核注冊表增刪改查

    注冊表是Windows中的一個重要的資料庫,用于存盤系統和應用程式的設定資訊,注冊表是一個巨大的樹形結構,無論在應用層還是內核層操作注冊表都有獨立的API函式可以使用,而在內核中讀寫注冊表則需要使用內核裝用API函式,如下將依次介紹并封裝一些案例,實作對注冊表的創建,洗掉,更新,查詢等操作。 ......

    uj5u.com 2023-06-22 08:06:36 more
  • 驅動開發:內核注冊表增刪改查

    注冊表是Windows中的一個重要的資料庫,用于存盤系統和應用程式的設定資訊,注冊表是一個巨大的樹形結構,無論在應用層還是內核層操作注冊表都有獨立的API函式可以使用,而在內核中讀寫注冊表則需要使用內核裝用API函式,如下將依次介紹并封裝一些案例,實作對注冊表的創建,洗掉,更新,查詢等操作。 ......

    uj5u.com 2023-06-22 08:06:01 more
  • 讀發布!設計與部署穩定的分布式系統(第2版)筆記08_自黑與放大

    ![](https://img2023.cnblogs.com/blog/3076680/202306/3076680-20230621151546278-1606324122.png) # 1. 自黑式攻擊 ## 1.1. 自黑只會偶爾成為人類的美德 ## 1.2. 對系統來說,絕對不會推崇自黑 ......

    uj5u.com 2023-06-22 08:05:37 more
  • 工業互聯網專案開發作業流程及核心問題

    工業互聯網專案開發全流程V3.0 工業互聯網專案開發作業流程及核心問題 一、需求分析 1、共享平臺需求分析 這個平臺要解決什么問題?這個平臺的用戶群體是誰?這個平臺應該具備哪些主要功能?這個平臺的使用場景是什么?這個平臺如何與現有的系統集成? 2、需求檔案設計 需求檔案是否詳細、明確,且可以量化?是 ......

    uj5u.com 2023-06-21 08:49:53 more
  • 工程師常用的6種最佳實踐

    一、約定大于配置 泰思勒定律也被稱為復雜度守恒定律。該定律指出每一個程序都有其固有的復雜性,存在一個臨界點,超過了這個點程序就不能再簡化了,你只能將固有的復雜性從一個地方移動到另外一個地方。 根據這個定律,在做系統設計時,默認會給用戶一個“套餐”,這個套餐會滿足多數人的需求。實在不滿足需求再特殊配置 ......

    uj5u.com 2023-06-21 08:49:34 more
  • 工業互聯網專案開發作業流程及核心問題

    工業互聯網專案開發全流程V3.0 工業互聯網專案開發作業流程及核心問題 一、需求分析 1、共享平臺需求分析 這個平臺要解決什么問題?這個平臺的用戶群體是誰?這個平臺應該具備哪些主要功能?這個平臺的使用場景是什么?這個平臺如何與現有的系統集成? 2、需求檔案設計 需求檔案是否詳細、明確,且可以量化?是 ......

    uj5u.com 2023-06-21 08:48:49 more
  • 工程師常用的6種最佳實踐

    一、約定大于配置 泰思勒定律也被稱為復雜度守恒定律。該定律指出每一個程序都有其固有的復雜性,存在一個臨界點,超過了這個點程序就不能再簡化了,你只能將固有的復雜性從一個地方移動到另外一個地方。 根據這個定律,在做系統設計時,默認會給用戶一個“套餐”,這個套餐會滿足多數人的需求。實在不滿足需求再特殊配置 ......

    uj5u.com 2023-06-21 08:48:30 more
  • Java設計模式之代理模式--經紀人的作業

    代理模式是23種設計模式中結構型模式的一種,它的核心是通過代理類來完成其他物件的訪問,降低訪問者和被訪問者的耦合度,也對功能進行了增強。 ......

    uj5u.com 2023-06-20 10:32:31 more
  • 如何設計一個海量任務調度系統

    在日常開發中會經常遇到一些需要異步定時執行的業務訴求,典型的使用場景如:超時未支付訂單關單、每隔 2h 更新好友排行榜、3.22 日 17 點《xx》劇上線等。目前業務側多基于以下思路來快速搭建一個調度系統,mysql 或者 redis 佇列存盤待執行任務,通過 crontab 定時觸發應用完成“撈... ......

    uj5u.com 2023-06-20 10:26:58 more