主頁 > 軟體設計 > 小公司的應用服務部署歷程

小公司的應用服務部署歷程

2022-11-22 07:33:27 軟體設計

先宣告一下:我所在的公司是一個小團隊,做物聯網相關的,前后端、硬體、測驗加起來也就五六十個人左右;本人的崗位是Java開發(兼DBA、運維,,,);我進公司時整個專案的部署架構為 簡單jar包部署微服務集群形式;去年公司將部分服務使用docker進行部署;因為現在服務稍微有點多導致容器管理起來也比較難,再加上我們公司沒有專門的運維人員,所以現在打算使用云商的k8s來對容器統一進行管理,因為運維相關的事情我一直在負責,上周老大讓我畫一下用k8s部署介面呼叫鏈路圖,所以我便順便總結了一下,以下大部分內容為我自己理解,如果有什么不對的地方還請大家多多指出,

一.常見服務部署架構

1.傳統服務器jar運行部署(公司之前使用的部署方式)

服務部署架構圖

 優點

  •  學習成本低:只需要掌握Linux命令即可操作,不需要掌握其他特殊命令;

缺點

  •   隔離性差: 1.各個集群中所有服務共用相同運行環境,如果環境發生錯誤將會影響集群當前節點上所有的服務;2.如果其中某一個服務發生死鎖、記憶體泄漏等例外,此服務部署的所有節點(服務器)的記憶體/CPU可能會被占滿,也將影響整個集群的其他服務,導致所有應用不可用;[之前一個專案CPU占用過高進而影響到節點上所有的服務]
  • 部署步驟繁瑣:想要部署一個服務,必須得一臺一臺的進行部署; 
  • 有操作風險:開發人員直接操作服務器,有存在誤操作的風險(sudo rm -rf /*),
  • 服務啟動速度慢

2.docker 容器化部署(公司目前使用的部署方式)

服務部署架構圖

優點

  • 使用方便:只需要拉取鏡像、運行鏡像 兩步操作即可運行一個服務;
  • 隔離性好:一個容器一個運行環境,互不影響,運行時分配好記憶體,如果某一個服務出現記憶體泄漏、CPU占用高等問題,只會影響當前容器,不會觸及到其他容器;
  • 快速回滾:當前版本如果出現問題,可以快速的拉取前一個容器的版本,如果使用上面那個部署形式則需要使用git回滾完,再重新打包部署;
  • 系統利用率高:docker對系統資源的利用率更高,無論是應用執行速度,記憶體損耗或者檔案存盤速度,都要比傳統虛擬機技術更高效,因此,相比虛擬機技術,一個相同配置的主機往往可以運行更多數量的應用;
  • 啟動服務的速度更快,

缺點

  • 管理麻煩:隨著業務的不斷發展,微服務不斷的增加,導致容器太多管理麻煩,增加運維成本;
  • 誤操作風險:跟上面那一張部署方式一樣,開發人員直接操作服務器,有一定的風險;
  • 學習成本:稍微需要一點容器相關的知識,需要學習docker常見的一些命令
  • 其他的暫時沒太關心,

3.k8s容器化部署(現在公司需要升級的部署方式)

服務部署架構圖

名詞解釋

  • Node:單臺主機,可以是物理的或虛擬的計算機,結點分為主結點(master)和作業結點(worker) – 個人理解:一個節點就是一臺服務器(實體)
  • Master:k8s 集群控制節點,對集群進行調度管理,接受集群外用戶去集群操作請求
  • Pod :K8s中的作業單元,服務運行的最小單元,每個Pod中包含一至多個容器;一個Pod的容器在K8s集群中有相同的地址和埠范圍,即容器暴露于K8s集群的埠號不可重復- 個人理解:一個每個Pod就是k8s虛擬出來的一個微型服務器,它有自己的虛擬IP、埠等等
  • Deployment:無狀態作業負載,個人理解:就是管理Pod的,負載Pod的擴縮容等操作,
  • StatefulSet:有狀態作業負載,與Deployment一樣,不同點在于 Deployment的Pod名稱,主機名稱 ,存盤等都是隨機,不穩定的,所以不適合資料庫等需要持久化的服務器運行,而StatefulSet就可以,

優點

  • 自動部署和回滾:我們可以直接通過k8s控制臺一鍵實作目標版本代碼的回滾、部署,
  • 服務發現和負載均衡:Kubernetes 可以使用 DNS 名稱或自己的 IP 地址來曝露容器, 如果進入容器的流量很大, Kubernetes 可以負載均衡并分配網路流量,從而使部署穩定,
  • 自我修復:Kubernetes 將重新啟動失敗的容器、替換容器、殺死不回應用戶定義的運行狀況檢查的容器,
  • 不需要直接操作服務器:控制臺操作,簡化了部署流程,減少了運維成本,開發人員無需關注服務器運維相關事情,
  • 資源調度:當node節點上的CPU、記憶體不夠用的時候,可以擴充node節點,新建的pod就會被調度到新擴充的node節點上,
  • 故障遷移:當某一個node節點關機或掛掉后,node節點上的服務會自動轉移到另一個node節點上,這個程序所有服務不中斷
  • 資源隔離:可以通過創建開發、測驗、預發、生產等命名空間實作不同環境的隔離,各環境之間互不影響,
  • 擴縮容方便:只需要在控制臺調整每個Deployment中Pod的數量就可以實作自動擴縮容,
  • 減少了公司運維成本
  • Docker有的其他優點,

缺點

  • 部署麻煩(自己搭建)
  • 占用資源多(自己搭建)
  • 運維成本高(自己搭建)

綜上所述:咱們使用云商搭建好的k8s,所以說目前對我們來說沒有什么缺點 -- 嘿嘿~,

二.k8s部署、服務呼叫鏈路相關

1.簡介

就不介紹了,有興趣的可以看一下官方檔案:https://kubernetes.io/zh-cn/docs/concepts/overview/

2.基本概念

 

Pod里是容器,PodReplicaSet管理,ReplicaSet控制pod的數量;

ReplicaSetDeployment管理,Deployment控制pod應用的升級、回滾,當然也能控制pod的數量,

Service提供一個統一固定入口,負責將前端請求轉發給Pod

3.呼叫鏈路

1.目前公司前后端服務呼叫鏈路

前端

1、   前端訪問域名;

2、   域名DNS決議到部署前端專案的服務器(集群:則決議到集群對應的SLB負載均衡公網IP上—SLB負責具體將請求打在某一臺服務器上);

3、   被請求的服務器用Nginx通過域名加目錄的形式將請求轉發到不同的前端專案,

后端介面

1、   訪問api介面

2、   域名DNS決議到部署網關服務器(集群:則決議到集群對應的SLB負載均衡公網IP上—SLB負責具體將請求打在某一臺服務器上);

3、   被請求的服務器用Nginx將請求轉發到當前服務器的Gateway網關

4、   網關對請求介面進行鑒權、匹配路由等操作,

5、   通過Nacos自帶負載均衡Ribbon負載到具體某一個應用服務

6、   回傳結果請求結束,

2.使用k8s部署后,前后端呼叫鏈路

前端

1、SLB監聽80和443埠,

2、請求進來進行域名DNS決議,決議到集群暴露出來的公網SLB的IP上,

3、經過nginx Ingress 轉發匹配請求路徑,將請求轉發到不同的Server(一個Server對應一個Deployment,對應一個專案)上,

4、Server會通過k8s自身的負載均衡演算法將請求負載到某一個Pod上面(這一步k8s內部有一個負載均衡選擇具體服務的哪一個Pod)

5、訪問到具體的Pod,回傳結果,

后臺介面

1、  SLB監聽80和443埠,

2、  請求進來進行域名DNS決議,決議到集群暴露出來的公網SLB的IP上,

3、  經過nginx Ingress 轉發到對應的gateway網關Server上,

4、  Server會通過k8s自身的負載均衡演算法將請求負載到某一個網關Pod上面,

5、  網關對請求介面進行鑒權、匹配路由等操作,

6、  通過Nacos自帶負載均衡Ribbon負載到具體某一個應用服務

7、  回傳結果請求結束,

4.阿里云流水線 + Kubernetes 鏡像升級部署實踐

K8s鏡像部署

先進行鏡像構建 如下兩步操作并運行流水線

在k8s管理界面的 [作業負載] --> [無狀態] 目錄根據需要部署的環境切換命名空間,如:測驗環境(namespace-dev)

 創建對應的 Deployment 與 pod

點擊右上角“使用鏡像創建”、對k8s編排掌握好的可以直接使用 yaml 創建,推薦使用鏡像創建,

a.填寫對應的應用服務資訊

b.選擇對應的鏡像和版本(剛才創建的)

其他的不需要填、如果有提示不能為空的直接刪掉就可以了

c.下一步直接點擊創建、完成后出來到無狀態目錄下找到創建的Deployment,點擊去 ---> 容器組 -->  點進去 --->  日志 (進行日志查看)

k8s鏡像升級

回到流水線頁面在構建鏡像的基礎上新建一個 部署任務--Kubernetes 鏡像升級注意:  命名空間、Deployment名稱、容器名稱 不要填錯,

這樣就完成了k8s鏡像的升級

本文來自博客園,作者:Tom-shushu,轉載請注明原文鏈接:https://www.cnblogs.com/Tom-shushu/p/16913567.html

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/537746.html

標籤:其他

上一篇:小公司的應用服務部署歷程

下一篇:在HTML中的單個文本上使用影片(CSS)

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:20:47 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:20:25 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:20:17 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:20:10 more
  • 【中介者設計模式詳解】C/Java/JS/Go/Python/TS不同語言實作

    * 中介者模式是一種行為型設計模式,它可以用來減少類之間的直接依賴關系,
    * 將物件之間的通信封裝到一個中介者物件中,從而使得各個物件之間的關系更加松散。
    * 在中介者模式中,物件之間不再直接相互互動,而是通過中介者來中轉訊息。 ......

    uj5u.com 2023-04-20 08:19:44 more
  • 露天煤礦現場調研和交流案例分享

    他們集團的資訊化公司及研究院在一個礦區正在做智能礦山的統一平臺的 試點,專案投資大概1億,包括了礦山的各方面的內容,顯示得我們這次交流有點多余。他們2年前開始做智能礦山的規劃,有很多煤礦行業專家的加持,他們的描述是非常完美,但是去年底應該上線的平臺,現在還沒有看到影子。他們確實有很多場景需求,但是被... ......

    uj5u.com 2023-04-20 08:19:07 more
  • 《社區人員管理》實戰案例設計&個人案例分享

    設計是一個讓人夢想成真程序,開始編碼、測驗、除錯之前進行需求分析和架構設計,才能保證關鍵方面都做正確 ......

    uj5u.com 2023-04-20 08:18:57 more
  • 軟體架構生態化-多角色交付的探索實踐

    作為一個技術架構師,不僅僅要緊跟行業技術趨勢,還要結合研發團隊現狀及痛點,探索新的交付方案。在日常中,你是否遇到如下問題 “ 業務需求排期長研發是瓶頸;非研發角色感受不到研發技改提效的變化;引入ISV 團隊又擔心質量和安全,培訓周期長“等等,基于此我們探索了一種新的技術體系及交付方案來解決如上問題。 ......

    uj5u.com 2023-04-20 08:18:49 more
  • 05單件模式

    #經典的單件模式 public class Singleton { private static Singleton uniqueInstance; //一個靜態變數持有Singleton類的唯一實體。 // 其他有用的實體變數寫在這里 //構造器宣告為私有,只有Singleton可以實體化這個類! ......

    uj5u.com 2023-04-19 08:42:51 more
  • 【架構與設計】常見微服務分層架構的區別和落地實踐

    軟體工程的方方面面都遵循一個最基本的道理:沒有銀彈,架構分層模型更是如此,每一種都有各自優缺點,所以請根據不同的業務場景,并遵循簡單、可演進這兩個重要的架構原則選擇合適的架構分層模型即可。 ......

    uj5u.com 2023-04-19 08:42:41 more