主頁 > 軟體設計 > ET介紹——強大的MongoBson庫

ET介紹——強大的MongoBson庫

2023-05-19 10:37:28 軟體設計

強大的MongoBson庫

后端開發,統計了一下大概有這些場景需要用到序列化:

  1. 物件通過序列化反序列化clone
  2. 服務端資料庫存盤資料,二進制
  3. 分布式服務端,多行程間的訊息,二進制
  4. 后端日志,文本格式
  5. 服務端的各種組態檔,文本格式

C#序列化庫有非常非常多了,protobuf,json等等,但是這些序列化庫都無法應當所有場景,既要可讀又要小,protobuf不支持復雜的物件結構(無法使用繼承),做訊息合適,做資料庫存盤和日志格式并不好用,json做日志格式合適,但是做網路訊息和資料存盤就太大,我們當然希望一個庫能滿足上面所有場景,理由如下:

  1. 你想想某天你的組態檔需要放到資料庫中保存,你不需要進行格式轉換,后端直接把前端發過來的配置訊息保存到資料庫中,這是不是能減少非常多錯誤呢?
  2. 某天有些服務端的組態檔不用檔案格式了,需要放在資料庫中,同樣,只需要幾行代碼就可以完成遷移,
  3. 某天后端服務器crash,你需要掃描日志進行資料恢復,把日志進行反序列化成C#物件,一條條進行處理,再轉成物件保存到資料庫就完成了,
  4. 物件保存在資料庫,直接就可以看到文本內容,可以做各種類sql的操作
  5. 想像一個場景,一個配置文本物件,反序列化到記憶體,通過網路訊息發送,存盤到資料庫中,整個程序一氣呵成,

簡單來說就是減少各種資料轉換,減少代碼,提高開發效率,提高可維護性,當然,Mongo Bson就能夠滿足,MongoDB庫既可以序列化成文本也可以序列化成BSON的二進制格式,并且MongoDB本身就是一個游戲中使用非常多的資料庫,Mongo Bson非常完善,是我見過功能最全使用最強大的序列化庫,有些功能十分貼心,其支持功能如下:

  1. 支持復雜的繼承結構
  2. 支持忽略某些欄位序列化
  3. 支持欄位默認值
  4. 結構多出多余的欄位照樣可以反序列化,這對多版本協議非常有用
  5. 支持ISupportInitialize介面使用,這個在反序列化的時候簡直就是神器
  6. 支持文本json和二進制bson序列化
  7. MongoDB資料庫支持

簡單的介紹下mongo bson庫

1.支持序列化反序列化成json或者bson

public sealed class Player
    {
        public long Id;

        public string Account { get; private set; }

        public long UnitId { get; set; }
    }

    Player player1 = new Player() { Id = 1 };
    string json = player1.ToJson();
    Console.WriteLine($"player1 to json: {json}");
    Console.WriteLine($"player to bson: {player.ToBson().ToHex()}");
    // output:
    // player to json: { "_id" : NumberLong(1), "C" : [], "Account" : null, "UnitId" : NumberLong(0) }
    // player to bson: B000000125F69640001000000000000000A4163636F756E740012556E6974496400000000000000000000

 

注意mongo的json跟標準的json有點區別,如果想用標準的json,可以傳入一個JsonWriterSettings物件,限制使用JsonOutputMode.Strict模式

// 使用標準json
    Player player2 = new Player() { Id = 1 };
    Console.WriteLine($"player to json: {player2.ToJson(new JsonWriterSettings() {OutputMode = JsonOutputMode.Strict})}");
    // player to json: { "_id" : 1, "C" : [], "Account" : null, "UnitId" : 0 }

 

反序列化json:

            // 反序列化json
        Player player11 = BsonSerializer.Deserialize<Player>(json);
        Console.WriteLine($"player11 to json: {player11.ToJson()}");

 

反序列化bson:

    // 反序列化bson
    using (MemoryStream memoryStream = new MemoryStream(bson))
    {
        Player player12 = (Player) BsonSerializer.Deserialize(memoryStream, typeof (Player));
        Console.WriteLine($"player12 to json: {player12.ToJson()}");
    }

 

2.可以忽略某些欄位

[BsonIgnore]該標簽用來禁止欄位序列化,

    public sealed class Player
    {
        public long Id;

        [BsonIgnore]
        public string Account { get; private set; }
        
        public long UnitId { get; set; }
    }

    Player player = new Player() { Id = 2, UnitId = 3, Account = "panda"};
    Console.WriteLine($"player to json: {player.ToJson()}");
    // player to json: { "_id" : 2, "UnitId" : 3 }

 

3.支持默認值以及取別名

[BsonElement] 欄位加上該標簽,即使是private欄位也會序列化(默認只序列化public欄位),該標簽還可以帶一個string引數,給欄位序列化指定別名,

    public sealed class Player
    {
        public long Id;

        public string Account { get; private set; }

        [BsonElement("UId")]
        public long UnitId { get; set; }
    }
    Player player = new Player() { Id = 2, UnitId = 3, Account = "panda"};
    Console.WriteLine($"player to json: {player.ToJson()}");
    // player to json: { "_id" : 2, "Account" : "panda", "UId" : 3 }

 

4.升級版本支持

[BsonIgnoreExtraElements] 該標簽用在class上面,反序列化時用來忽略多余的欄位,一般版本兼容需要考慮,低版本的協議需要能夠反 序列化高版本的內容,否則新版本加了欄位,舊版本結構反序列化會出錯

    [BsonIgnoreExtraElements]
    public sealed class Player
    {
        public long Id;

        public string Account { get; private set; }

        [BsonElement("UId")]
        public long UnitId { get; set; }
    }

 

5.支持復雜的繼承結構

mongo bson庫強大的地方在于完全支持序列化反序列化繼承結構,需要注意的是,繼承反序列化需要注冊所有的父類,有兩種方法: a. 你可以在父類上面使用[BsonKnownTypes]標簽宣告繼承的子類,這樣mongo會自動注冊,例如:

    [BsonKnownTypes(typeof(Entity))]
    public class Component
    {
    }
    [BsonKnownTypes(typeof(Player))]
    public class Entity: Component
    {
    }
    public sealed class Player: Entity
    {
        public long Id;
        
        public string Account { get; set; }
        
        public long UnitId { get; set; }
    }

 

這樣有缺陷,因為框架并不知道一個類會有哪些子類,這樣做對框架代碼有侵入性,我們希望能解除這個耦合 ,可以掃描程式集中所有子類父類的型別,將他們注冊到mongo驅動中

            Type[] types = typeof(Game).Assembly.GetTypes();
            foreach (Type type in types)
            {
                if (!type.IsSubclassOf(typeof(Component)))
                {
                    continue;
                }

                BsonClassMap.LookupClassMap(type);
            }

            BsonSerializer.RegisterSerializer(new EnumSerializer<NumericType>(BsonType.String));

 

這樣完全的自動化注冊,使用者也不需要關心類是否注冊,

6.ISupportInitialize介面

mongo bson反序列化時支持一個ISupportInitialize介面,ISupportInitialize有兩個方法

    public interface ISupportInitialize
    {
        void BeginInit();
        void EndInit();
    }

 

BeginInit在反序列化前呼叫,EndInit在反序列化后呼叫,這個介面非常有用了,可以在反序列化后執行一些操作,例如

    [BsonIgnoreExtraElements]
    public class InnerConfig: AConfigComponent
    {
        [BsonIgnore]
        public IPEndPoint IPEndPoint { get; private set; }
        
        public string Address { get; set; }

        public override void EndInit()
        {
            this.IPEndPoint = NetworkHelper.ToIPEndPoint(this.Address);
        }
    }

 

InnerConfig是ET中行程內網地址的配置,由于IPEndPoint不太好配置,我們可以配置成string形式,然后反序列化的時候在EndInit中把string轉換成IPEndPoint, 同樣我給protobuf反序列化方法也加上了這個呼叫,參考ProtobufHelper.cs,ET的protobuf因為要支持ilruntime,所以去掉了map的支持,假如我們想要一個map怎么辦呢?這里我給生成的代碼都做了手腳,把proto訊息都改成了partial class,這樣我們可以自己擴展這個class,比如:

message UnitInfo
{
    int64 UnitId  = 1;

    float X = 2;
    float Y = 3;
    float Z = 4;
}

// protobuf
message G2C_EnterMap // IResponse
{
    int32 RpcId = 90;
    int32 Error = 91;
    string Message = 92;
    // 自己的unit id
    int64 UnitId = 1;
    // 所有的unit
    repeated UnitInfo Units = 2;
}

 

這個網路訊息有個repeated UnitInfo欄位,在protobuf中其實是個陣列,使用起來不是很方便,我希望轉成一個Dictionary<Int64, UnitInfo>的欄位,我們可以做這樣的操作:

    public partial class G2C_EnterMap: ISupportInitialize
    {
        public Dictionary<Int64, UnitInfo> unitsDict = new Dictionary<long, UnitInfo>();
        
        public void BeginInit()
        {
        }

        public void EndInit()
        {
            foreach (var unit in this.Units)
            {
                this.unitsDict.Add(unit.UnitId, unit);
            }
        }
    }

 

通過這樣一段代碼把訊息進行擴展一下,反序列化出來之后,自動轉成了一個Dictionary,

ET開源地址地址:egametang/ET: Unity3D Client And C# Server Framework (github.com)   qq群:474643097

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/552882.html

標籤:架構設計

上一篇:領域驅動設計DDD架構決議和繪圖模板分享

下一篇:返回列表

標籤雲
其他(159331) Python(38156) JavaScript(25439) Java(18070) C(15228) 區塊鏈(8267) C#(7972) AI(7469) 爪哇(7425) MySQL(7197) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5871) 数组(5741) R(5409) Linux(5340) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4573) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2433) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1975) 功能(1967) Web開發(1951) HtmlCss(1940) python-3.x(1918) C++(1917) 弹簧靴(1913) xml(1889) PostgreSQL(1878) .NETCore(1861) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 面試突擊第一季,第二季,第三季

    第一季必考 https://www.bilibili.com/video/BV1FE411y79Y?from=search&seid=15921726601957489746 第二季分布式 https://www.bilibili.com/video/BV13f4y127ee/?spm_id_fro ......

    uj5u.com 2020-09-10 05:35:24 more
  • 第三單元作業總結

    1.前言 這應該是本學期最后一次寫作業總結了吧。總體來說,對作業的節奏也差不多掌握了,作業做起來的效率也更高了。雖然和之前的作業一樣,作業中都要用到新的知識,但是相比之前,更加懂得了如何利用工具以及資料。雖然之間卡過殼,但總體而言,這幾次作業還算完成的比較好。 2.作業程序總結 相比前兩個單元,此單 ......

    uj5u.com 2020-09-10 05:35:41 more
  • 北航OO(2020)第四單元博客作業暨課程總結博客

    北航OO(2020)第四單元博客作業暨課程總結博客 本單元作業的架構設計 在本單元中,由于UML圖具有比較清晰的樹形結構,因此我對其中需要進行查詢操作的元素進行了包裝,在樹的父節點中存盤所有孩子的參考。考慮到性能問題,我采用了快取機制,一次查詢后盡可能快取已經遍歷過的資訊,以減少遍歷次數。 本單元我 ......

    uj5u.com 2020-09-10 05:35:48 more
  • BUAA_OO_第四單元

    一、UML決議器設計 ? 先看下題目:第四單元實作一個基于JDK 8帶有效性檢查的UML(Unified Modeling Language)類圖,順序圖,狀態圖分析器 MyUmlInteraction,實際上我們要建立一個有向圖模型,UML中的物件(元素)可能與同級元素連接,也可與低級元素相連形成 ......

    uj5u.com 2020-09-10 05:35:54 more
  • 6.1邏輯運算子

    邏輯運算子 1. && 短路與 運算式1 && 運算式2 01.運算式1為true并且運算式2也為true 整體回傳為true 02.運算式1為false,將不會執行運算式2 整體回傳為false 03.只要有一個運算式為false 整體回傳為false 2. || 短路或 運算式1 || 運算式2 ......

    uj5u.com 2020-09-10 05:35:56 more
  • BUAAOO 第四單元 & 課程總結

    1. 第四單元:StarUml檔案決議 本單元采用了圖模型決議UML。 UML檔案可以抽象為圖、子圖、邊的邏輯結構。 在實作中,圖的節點包括類、介面、屬性,子圖包括狀態圖、順序圖等。 采用了三次遍歷UML元素的方法建圖,第一遍遍歷建點,第二、三次遍歷設定屬性、連邊,實作圖物件的初始化。這里借鑒了一些 ......

    uj5u.com 2020-09-10 05:36:06 more
  • 談談我對C# 多型的理解

    面向物件三要素:封裝、繼承、多型。 封裝和繼承,這兩個比較好理解,但要理解多型的話,可就稍微有點難度了。今天,我們就來講講多型的理解。 我們應該經常會看到面試題目:請談談對多型的理解。 其實呢,多型非常簡單,就一句話:呼叫同一種方法產生了不同的結果。 具體實作方式有三種。 一、多載 多載很簡單。 p ......

    uj5u.com 2020-09-10 05:36:09 more
  • Python 資料驅動工具:DDT

    背景 python 的unittest 沒有自帶資料驅動功能。 所以如果使用unittest,同時又想使用資料驅動,那么就可以使用DDT來完成。 DDT是 “Data-Driven Tests”的縮寫。 資料:http://ddt.readthedocs.io/en/latest/ 使用方法 dd. ......

    uj5u.com 2020-09-10 05:36:13 more
  • Python里面的xlrd模塊詳解

    那我就一下面積個問題對xlrd模塊進行學習一下: 1.什么是xlrd模塊? 2.為什么使用xlrd模塊? 3.怎樣使用xlrd模塊? 1.什么是xlrd模塊? ?python操作excel主要用到xlrd和xlwt這兩個庫,即xlrd是讀excel,xlwt是寫excel的庫。 今天就先來說一下xl ......

    uj5u.com 2020-09-10 05:36:28 more
  • 當我們創建HashMap時,底層到底做了什么?

    jdk1.7中的底層實作程序(底層基于陣列+鏈表) 在我們new HashMap()時,底層創建了默認長度為16的一維陣列Entry[ ] table。當我們呼叫map.put(key1,value1)方法向HashMap里添加資料的時候: 首先,呼叫key1所在類的hashCode()計算key1 ......

    uj5u.com 2020-09-10 05:36:38 more
最新发布
  • ET介紹——強大的MongoBson庫

    強大的MongoBson庫 后端開發,統計了一下大概有這些場景需要用到序列化: 物件通過序列化反序列化clone 服務端資料庫存盤資料,二進制 分布式服務端,多行程間的訊息,二進制 后端日志,文本格式 服務端的各種組態檔,文本格式 C#序列化庫有非常非常多了,protobuf,json等等。但是這 ......

    uj5u.com 2023-05-19 10:37:28 more
  • 領域驅動設計DDD架構決議和繪圖模板分享

    DDD整潔架構 DDD整潔架構為了解決強呼叫的關系,出現了洋蔥架構(六邊形)架構,就是為了實作依賴倒置 它的思想就是把領域模型放到核心的位置,領域模型是獨立的,不會直接強依賴其他層,而通過配接器來完成領域模型和外層的資料交換。 DDD分層架構和三層架構的區別與關系 DD分層架構和三層架構的區別與關系 ......

    uj5u.com 2023-05-19 10:37:10 more
  • 架構師日記-從代碼到設計的性能優化指南 | 京東云技術團隊

    性能優化是個系統性工程,宏觀上可分為網路,服務,存盤幾個方向,每個方向又可以細分為架構,設計,代碼,可用性,度量等多個子項。 本文將重點從代碼和設計兩個子項展開,談談那些提升性能的知識點。 ......

    uj5u.com 2023-05-19 10:36:53 more
  • 如何讓技術架構師具有預知未來業務發展的能力?

    大家好,今天我們來分享業務架構,但是我們并不是以產品經理角度講述一個業務架構是什么以及如何做?而是以一個技術架構師的角度,講述如何承接業務架構或在沒有業務架構的時候,如何判斷業務變化趨勢而對系統架構提前做出反應。 ......

    uj5u.com 2023-05-18 09:53:25 more
  • 如何讓技術架構師具有預知未來業務發展的能力?

    大家好,今天我們來分享業務架構,但是我們并不是以產品經理角度講述一個業務架構是什么以及如何做?而是以一個技術架構師的角度,講述如何承接業務架構或在沒有業務架構的時候,如何判斷業務變化趨勢而對系統架構提前做出反應。 ......

    uj5u.com 2023-05-18 09:47:42 more
  • 策略模式(Strategy Pattern)

    策略模式 一、介紹 在策略模式(Strategy Pattern)中,一個類的行為或其演算法可以在運行時更改。這種型別的設計模式屬于行為型模式。 意圖:定義一系列的演算法,把它們一個個封裝起來, 并且使它們可相互替換。 主要解決:在有多種演算法相似的情況下,使用 if...else 所帶來的復雜和難以維護 ......

    uj5u.com 2023-05-18 08:48:04 more
  • 小程式安全架構分析

    ?隨著數字時代的到來,資料不再是普通的符號和徽標,也不僅僅是普通的計算和統計工具。而安全問題也已經成為了一個非常重要的議題。今天就來探討下小程式的安全架構,以了解小程式如何做到安全保障。 小程式的安全架構 先說說小程式自身的安全架構,小程式的安全架構由應用程式層、客戶端層、服務層和資料存盤層多個層次 ......

    uj5u.com 2023-05-18 08:47:55 more
  • java設計模式【工廠方法模式】

    java設計模式【工廠方法模式】 工廠方法模式 工廠方法模式(FACTORY METHOD)是一種常用的類創建型設計模式,此模式的核心精神是封裝類中變化的部分,提取其中個性化善變的部分為獨立類,通過依賴注入以達到解耦、復用和方便后期維護拓展的目的。它的核心結構有四個角色,分別是抽象工廠;具體工廠;抽 ......

    uj5u.com 2023-05-18 08:47:43 more
  • 策略模式(Strategy Pattern)

    策略模式 一、介紹 在策略模式(Strategy Pattern)中,一個類的行為或其演算法可以在運行時更改。這種型別的設計模式屬于行為型模式。 意圖:定義一系列的演算法,把它們一個個封裝起來, 并且使它們可相互替換。 主要解決:在有多種演算法相似的情況下,使用 if...else 所帶來的復雜和難以維護 ......

    uj5u.com 2023-05-18 08:47:27 more
  • java設計模式【工廠方法模式】

    java設計模式【工廠方法模式】 工廠方法模式 工廠方法模式(FACTORY METHOD)是一種常用的類創建型設計模式,此模式的核心精神是封裝類中變化的部分,提取其中個性化善變的部分為獨立類,通過依賴注入以達到解耦、復用和方便后期維護拓展的目的。它的核心結構有四個角色,分別是抽象工廠;具體工廠;抽 ......

    uj5u.com 2023-05-18 08:47:17 more