主頁 > .NET開發 > 聊聊RabbitMQ那一些事兒之一基礎應用

聊聊RabbitMQ那一些事兒之一基礎應用

2020-09-16 20:35:48 .NET開發

聊聊RabbitMQ那一些事兒之一基礎應用

  Hi,各位熱愛技術的小伙伴您們好,今年的疫情害人啊,真心祝愿您和您的家人大家都平平安安,健健康康,年前到現在一直沒有總結點東西,寫點東西,不然久了自己感覺自己都要被廢啦,這個周末花了一些時間來梳理了一下RabbitMQ的相關知識點,先來一個基礎篇,先用起來,我也是一個邊學習邊梳理的程序,如果有什么梳理的不妥之處,多多指點,相互學習,謝謝!

  在使用前,我們首先第一件事情就是環境搭建,至于RabbitMQ的環境搭建,我就不在此啰嗦了,網上一搜一大堆,還沒有搭建環境的小伙伴,可以網上找度娘哈,嘿嘿,

一、什么是MQ

  MQ簡單的說就是佇列,佇列的特性就是先進先出,我們其實可以把佇列理解為一個訊息管道,通過訊息管道實作訊息傳遞,最終達到不同的行程間、不同服務間的通訊需要,

  在一個程式中,我們 可以通過MQ實作不同行程間的通訊,在不同程式/服務間,我們同樣可以通過MQ來實作相互通訊,這也是本文的重點,這個時候就該今天的主角登場了,

二、RabbitMQ介紹

  RabbitMQ是一個開源的,在AMQP基礎完整的,可復用的企業訊息系統,我個人的簡單的理解就是,實作訊息的接收、存盤、管理、分發,在作業系統支持上,支持主流的作業系統(Linux、Windows);在開發語言介面支持上,支持所有的主流開發語言;在性能上,支持訊息持久化、集群化、高并發等等,

三、RabbitMQ關鍵詞介紹

  Broker(Server):接受客戶端連接,實作AMQP訊息佇列和路由功能的行程,我們可以把Broker叫做RabbitMQ服務器,

  Virtual Host:一個虛擬概念,其實簡單的理解你可以認為是在邏輯上對MQ進行磁區隔離,這樣避免不同業務的MQ直接交叉感染,一個Virtual Host里面可以有若干個Exchange和Queue,主要用于權限控制,隔離應用,如應用程式A使用VhostA,應用程式B使用VhostB,那么我們在VhostA中只存放應用程式A的exchange,queue和訊息,應用程式A的用戶只能訪問VhostA,不能訪問VhostB中的資料,

  Exchange:接受生產者發送的訊息,并根據Binding規則將訊息路由給服務器中的佇列,ExchangeType決定了Exchange路由訊息的行為,例如,在RabbitMQ中,ExchangeType有Direct、Fanout、Topic和Header四種,不同型別的Exchange路由規則是不一樣的(這些以后會詳細介紹),

  Queue:訊息佇列,用于存盤還未被消費者消費的訊息,佇列是先進先出的,默認情況下先存盤的訊息先被處理,

  Message:就是訊息,由Header和Body組成,Header是由生產者添加的各種屬性的集合,包括Message是否被持久化、由哪個Message Queue接受、優先級是多少等,Body是真正傳輸的資料,內容格式為byte[],

  Connection:連接,對于RabbitMQ而言,其實就是一個位于客戶端和Broker之間的TCP連接,

  Channel:道,僅僅創建了客戶端到Broker之間的連接Connection后,客戶端還是不能發送訊息的,需要在Connection的基礎上創建Channel,AMQP協議規定只有通過Channel才能執行AMQP的命令,一個Connection可以包含多個Channel,之所以需要Channel,是因為TCP連接的建立和釋放都是十分昂貴的,

四、RabbitMQ三大角色介紹

  通過上面的一些簡單介紹,我相信你對MQ有了一個初步的印象,也許你會云里霧里的,到底是怎么運行起來的啊,來一個實際點的,哈哈,不急,下面馬上進入RabbitMQ跑起來階段,其實要跑起來,我們還要簡單介紹一下RabbitMQ重要的三個角色:生產者、服務器、消費者,

  生產者:也就是訊息生產方,通過RabbitMQ提高的API,將訊息推送到RabbitMQ服務器,

  服務器:RabbitMQ的服務中心,接收生產者生產的訊息,并根據分發規則,將訊息推送到對應的消費者,

  消費者:顧名思義,就是訊息的最終接收處理者,

  這樣一來,我相信大家腦海里面已經有一個畫面了,生產者--生成訊息-->服務器--轉發-->消費者(最終處理訊息),這就是一個訊息的整體流程和生命周期,

 

五、RabbitMQ跑起來

  通過上面的介紹,我們應該知道MQ的簡單的訊息互動的流程,有了這個基礎,下面我們就分類來介紹一下三大角色的資料交付方式,整體上來說,資料互動方式上有以下5種方式(5種作業模式),在網上找了一張圖,很方便的供大家參考,

  其實通過上面的圖,我們會發現,前兩種情況,消費者和生成者之間都是直接通過連接,后面三種情況,消費者和生產者直接有一層交換機(Exchange),這樣一來,我們可以從整體上分為兩個大類:其一、訊息直推佇列;其二、訊息推送給交換機,交換機根據路由規則轉發至佇列,

  其實在實際的作業中,第一大類,我們是不會使用到的,都是采用的第二大類來實作實際的專案開發需求,但是第一大類,能夠很好的將我們先領我們入門,先簡單的把程式跑起來,由于時間原因,今天我們也就先實作第一大類的兩種情況,第二大類的,明后天在專門的文章來詳細介紹,

簡單模式:

簡單模式就是只有一個生產者,一個消費者,這個很簡單,下面用一個實際例子來說明,直接貼代碼:

生產者代碼: 

/// <summary>
 /// 訊息生成者
 /// </summary>
public class Program
{
    static void Main(string[] args)
    {
        // rabbitMQ鏈接物件
        var factory = new ConnectionFactory();
        // RabbitMQ服務在本地運行
        factory.HostName = "192.168.1.1";
        // RabbitMQ服務埠
        factory.Port = 5672;
        // 用戶名
        factory.UserName = "guest";
        // 密碼
        factory.Password = "guest";
        // 虛擬主機名稱
        factory.VirtualHost = "/";

        // 佇列名稱
        string queueName = "hello";

        // 創建鏈接
        using (var connection = factory.CreateConnection())
        {
            // 創建通道
            using (var channel = connection.CreateModel())
            {
                // 創建一個名稱為hello的訊息佇列--當然一步也可以通過RabbitMQ管理后臺添加
                // 當已經存在該佇列時,不會重復添加,但是如果已存在的佇列和新建的佇列存在屬性差異時,會創建失敗,會拋例外,所以在實際使用時,如果要通程序式創建佇列,最好要捕捉例外,避免因為這樣的問題而導致程式崩潰,
                channel.QueueDeclare(queueName, false, false, false, null);
                Console.WriteLine("我是生成者");

                while (true)
                {
                    Console.WriteLine("請輸入你要發送的訊息,并按Enter鍵結束");

                    // 接收用戶輸入的訊息
                    string message = Console.ReadLine();
                    // 訊息編碼
                    var body = Encoding.UTF8.GetBytes(message);
                    // 向訊息服務器推送訊息
                    channel.BasicPublish("", queueName, null, body);

                    Console.WriteLine($"已發送 {System.DateTime.Now.ToString("HH:mm:ss")}: {message}");
                }
            }
        }
    }
}

  消費者代碼:

 /// <summary>
 /// 訊息消費者
 /// </summary>
 public class Program
 {
     static void Main(string[] args)
     {
         // rabbitMQ鏈接物件
         var factory = new ConnectionFactory();
         // RabbitMQ服務在本地運行
         factory.HostName = "192.168.1.1";
         // RabbitMQ服務埠
         factory.Port = 5672;
         // 用戶名
         factory.UserName = "guest";
         // 密碼
         factory.Password = "guest";
         // 虛擬主機名稱
         factory.VirtualHost = "/";

         // 佇列名稱
         string queueName = "hello";

         // 創建鏈接
         using (var connection = factory.CreateConnection())
         {
             // 創建通道
             using (var channel = connection.CreateModel())
             {

                 // 創建一個名稱為hello的訊息佇列--當然一步也可以通過RabbitMQ管理后臺添加
                 // 當已經存在該佇列時,不會重復添加,但是如果已存在的佇列和新建的佇列存在屬性差異時,會創建失敗,會拋例外,所以在實際使用時,如果要通程序式創建佇列,最好要捕捉例外,避免因為這樣的問題而導致程式崩潰,
                 channel.QueueDeclare(queueName, false, false, false, null);
                 Console.WriteLine("我是消費者");

                 // 創建一個消費者
                 var consumer = new EventingBasicConsumer(channel);
                 // 訂閱對應的訊息 autoAck:是否自動確認
                 channel.BasicConsume(queueName, autoAck:false, consumer);

                 consumer.Received += (model, ea) =>
                 {
                     var body = ea.Body;
                     var message = Encoding.UTF8.GetString(body);
                     Console.WriteLine($"已接收 {System.DateTime.Now.ToString("HH:mm:ss")}: {message}");

                     // 為了模擬推送程序,在此程式休息1分鐘
                     Thread.Sleep(6000);
                     // 確認消費
                     channel.BasicAck(ea.DeliveryTag, false);
                 };
                 Console.ReadLine();
             }
         }
     }
 }

  

運行結果:

 

  通過實際的運行結果圖,我們很清楚的知道,生產者的訊息發生順序,和消費者消費的順序是一直的,這也就MQ的基本原理所在,

上面介紹了簡單模式,下面我在來介紹一下比簡單模式復雜一點的作業模式,

作業模式:

  我理解的簡單模式,只是帶我們入門,讓我們明白MQ的運行效果是咋樣的,但是在實際作業中,不可能只會有一個消費者,在實際的生產環境中生產者、消費者都可能會有多個存在,這也就是我們說的作業模式,那么,有多個生成的者的時候,不同的生產者之間又是怎么來消費訊息的呢?下面我們先通過實踐的例子來說明:

  具體的代碼和上面的代碼是一樣的,我們可以直接開兩個消費者就可以實作資料模擬,直接看運行結果:

  同上面的實際運行結果我們可以簡單的得出以下結論:

  當一個佇列有多個消費者時,在生成的實時訊息時,訊息佇列服務器會輪詢的均勻的分發給每一個消費者,

  哈哈哈,注意了,上面的結論我說的是實時訊息哦,這里面就包含了一個坑,在實際的使用程序中要特別注意,那就是歷史訊息處理上,在實際專案使用程序中,我們經常會遇到,當消費者打開時,佇列中已經有很多訊息待消費,這個時候又該如何保證多個消費均勻分配訊息呢?避免忙綠的消費者累死現象,其實很簡單,只需在消費端加上如下一個配置即可:

 
 // 通過Qos設定每次接收訊息的條數
 // 三個引數說明
 // prefetchSize:為預取的長度,一般設定為0即可,表示長度不限
 // prefetchCount:表示預取的條數,即發送的最大訊息條數
 // global表示是否在Connection中全域設定,true表示Connetion下的所有channel都設定為這個配置,
 channel.BasicQos(prefetchSize: 0,
                  prefetchCount: 1,
                  global: false);

  

  上面的配置中,最關鍵的一個引數就是prefetchCount,當我們設定為1時,就是能夠實作均勻的分發,下面分別對prefetchCount設定不同的值,來看看不同的效果:
  實體一:將prefetchCount設定為10,并生成3條歷史訊息,然后同時打開兩個消費者,看看3條訊息的分發消費情況:

  通過圖,我們得出,3條歷史訊息全部推送給了一個消費者,這樣就導致了一個消費者累死,一個消費者閑的慌,
  實體二:將prefetchCount設定為1,并生成4條歷史訊息,然后同時打開兩個消費者,看看3條訊息的分發消費情況:


  通過圖,我們得出,4條歷史訊息平均的分發給了兩個消費者,這也是我們想要的效果,
  所以在實際作業中,一定要注意這一個細節,不然有可能導致在服務器重啟時,有的服務器直接卡死現象,
  好了,時間不早了,今天就先寫到這,明天我們繼續分享后面的幾種模式,在分析完每一種模式后,我還好結合實際,封裝一個dll出來,供大家參考,到時候也會直接把原始碼提出來,歡迎大家關注,持續交流,疫情無情,我們學習不能停,加油吧,每一個小伙伴!?

 

 

END
為了更高的交流,歡迎大家關注我的公眾號,掃描下面二維碼即可關注,謝謝:

 

 

轉載請註明出處,本文鏈接:https://www.uj5u.com/net/59643.html

標籤:.NET Core

上一篇:iNeuOS工業互聯平臺,.NETCore開發的視頻服務組件iNeuVideo,RTSP轉WebSocket

下一篇:學習服務之間的呼叫,三個方法的演化

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • WebAPI簡介

    Web體系結構: 有三個核心:資源(resource),URL(統一資源識別符號)和表示 他們的關系是這樣的:一個資源由一個URL進行標識,HTTP客戶端使用URL定位資源,表示是從資源回傳資料,媒體型別是資源回傳的資料格式。 接下來我們說下HTTP. HTTP協議的系統是一種無狀態的方式,使用請求/ ......

    uj5u.com 2020-09-09 22:07:47 more
  • asp.net core 3.1 入口:Program.cs中的Main函式

    本文分析Program.cs 中Main()函式中代碼的運行順序分析asp.net core程式的啟動,重點不是剖析原始碼,而是理清程式開始時執行的順序。到呼叫了哪些實體,哪些法方。asp.net core 3.1 的程式入口在專案Program.cs檔案里,如下。ususing System; us ......

    uj5u.com 2020-09-09 22:07:49 more
  • asp.net網站作為websocket服務端的應用該如何寫

    最近被websocket的一個問題困擾了很久,有一個需求是在web網站中搭建websocket服務。客戶端通過網頁與服務器建立連接,然后服務器根據ip給客戶端網頁發送資訊。 其實,這個需求并不難,只是剛開始對websocket的內容不太了解。上網搜索了一下,有通過asp.net core 實作的、有 ......

    uj5u.com 2020-09-09 22:08:02 more
  • ASP.NET 開源匯入匯出庫Magicodes.IE Docker中使用

    Magicodes.IE在Docker中使用 更新歷史 2019.02.13 【Nuget】版本更新到2.0.2 【匯入】修復單列匯入的Bug,單元測驗“OneColumnImporter_Test”。問題見(https://github.com/dotnetcore/Magicodes.IE/is ......

    uj5u.com 2020-09-09 22:08:05 more
  • 在webform中使用ajax

    如果你用過Asp.net webform, 說明你也算是.NET 開發的老兵了。WEBform應該是2011 2013左右,當時還用visual studio 2005、 visual studio 2008。后來基本都用的是MVC。 如果是新開發的專案,估計沒人會用webform技術。但是有些舊版 ......

    uj5u.com 2020-09-09 22:08:50 more
  • iis添加asp.net網站,訪問提示:由于擴展配置問題而無法提供您請求的

    今天在iis服務器配置asp.net網站,遇到一個問題,記錄一下: 問題:由于擴展配置問題而無法提供您請求的頁面。如果該頁面是腳本,請添加處理程式。如果應下載檔案,請添加 MIME 映射。 WindowServer2012服務器,添加角色安裝完.netframework和iis之后,運行aspx頁面 ......

    uj5u.com 2020-09-09 22:10:00 more
  • WebAPI-處理架構

    帶著問題去思考,大家好! 問題1:HTTP請求和回傳相應的HTTP回應資訊之間發生了什么? 1:首先是最底層,托管層,位于WebAPI和底層HTTP堆疊之間 2:其次是 訊息處理程式管道層,這里比如日志和快取。OWIN的參考是將訊息處理程式管道的一些功能下移到堆疊下端的OWIN中間件了。 3:控制器處理 ......

    uj5u.com 2020-09-09 22:11:13 more
  • 微信門戶開發框架-使用指導說明書

    微信門戶應用管理系統,采用基于 MVC + Bootstrap + Ajax + Enterprise Library的技術路線,界面層采用Boostrap + Metronic組合的前端框架,資料訪問層支持Oracle、SQLServer、MySQL、PostgreSQL等資料庫。框架以MVC5,... ......

    uj5u.com 2020-09-09 22:15:18 more
  • WebAPI-HTTP編程模型

    帶著問題去思考,大家好!它是什么?它包含什么?它能干什么? 訊息 HTTP編程模型的核心就是訊息抽象,表示為:HttPRequestMessage,HttpResponseMessage.用于客戶端和服務端之間交換請求和回應訊息。 HttpMethod類包含了一組靜態屬性: private stat ......

    uj5u.com 2020-09-09 22:15:23 more
  • 部署WebApi隨筆

    一、跨域 NuGet參考Microsoft.AspNet.WebApi.Cors WebApiConfig.cs中配置: // Web API 配置和服務 config.EnableCors(new EnableCorsAttribute("*", "*", "*")); 二、清除默認回傳XML格式 ......

    uj5u.com 2020-09-09 22:15:48 more
最新发布
  • C#多執行緒學習(二) 如何操縱一個執行緒

    <a href="https://www.cnblogs.com/x-zhi/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/2943582/20220801082530.png" alt="" /></...

    uj5u.com 2023-04-19 09:17:20 more
  • C#多執行緒學習(二) 如何操縱一個執行緒

    C#多執行緒學習(二) 如何操縱一個執行緒 執行緒學習第一篇:C#多執行緒學習(一) 多執行緒的相關概念 下面我們就動手來創建一個執行緒,使用Thread類創建執行緒時,只需提供執行緒入口即可。(執行緒入口使程式知道該讓這個執行緒干什么事) 在C#中,執行緒入口是通過ThreadStart代理(delegate)來提供的 ......

    uj5u.com 2023-04-19 09:16:49 more
  • 記一次 .NET某醫療器械清洗系統 卡死分析

    <a href="https://www.cnblogs.com/huangxincheng/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/214741/20200614104537.png" alt="" /&g...

    uj5u.com 2023-04-18 08:39:04 more
  • 記一次 .NET某醫療器械清洗系統 卡死分析

    一:背景 1. 講故事 前段時間協助訓練營里的一位朋友分析了一個程式卡死的問題,回過頭來看這個案例比較經典,這篇稍微整理一下供后來者少踩坑吧。 二:WinDbg 分析 1. 為什么會卡死 因為是表單程式,理所當然就是看主執行緒此時正在做什么? 可以用 ~0s ; k 看一下便知。 0:000> k # ......

    uj5u.com 2023-04-18 08:33:10 more
  • SignalR, No Connection with that ID,IIS

    <a href="https://www.cnblogs.com/smartstar/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/u36196.jpg" alt="" /></a>...

    uj5u.com 2023-03-30 17:21:52 more
  • 一次對pool的誤用導致的.net頻繁gc的診斷分析

    <a href="https://www.cnblogs.com/dotnet-diagnostic/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/3115652/20230225090434.png" alt=""...

    uj5u.com 2023-03-28 10:15:33 more
  • 一次對pool的誤用導致的.net頻繁gc的診斷分析

    <a href="https://www.cnblogs.com/dotnet-diagnostic/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/3115652/20230225090434.png" alt=""...

    uj5u.com 2023-03-28 10:13:31 more
  • C#遍歷指定檔案夾中所有檔案的3種方法

    <a href="https://www.cnblogs.com/xbhp/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/957602/20230310105611.png" alt="" /></a&...

    uj5u.com 2023-03-27 14:46:55 more
  • C#/VB.NET:如何將PDF轉為PDF/A

    <a href="https://www.cnblogs.com/Carina-baby/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/2859233/20220427162558.png" alt="" />...

    uj5u.com 2023-03-27 14:46:35 more
  • 武裝你的WEBAPI-OData聚合查詢

    <a href="https://www.cnblogs.com/podolski/" target="_blank"><img width="48" height="48" class="pfs" src="https://pic.cnblogs.com/face/616093/20140323000327.png" alt="" /><...

    uj5u.com 2023-03-27 14:46:16 more