主頁 > 軟體工程 > 請教IOCP的DisconnectEx投遞后完成事件達到順序問題。

請教IOCP的DisconnectEx投遞后完成事件達到順序問題。

2020-09-14 13:16:09 軟體工程

為了在IOCP中使SOCKET句柄復用,我使用了DisconnectExt函式,一般情況下客戶端與服務端建立連接后,服務端會投遞一個WSARecv例程給IOCP以接收來自客戶端的資料,而服務端主動斷開連接時會投DisconnectEx例程。

問題描述:
當服務端主動提交DisconnectEx例程后正常情況是先收到WSARecv完成事件 然后收到DisconnectEx完成事件并且在DisconnectEx事件中做一些資源清理作業然后把此句柄提交給AcceptEx佇列中。但問題是有時候先接收到的是DisconnectEx完成事件然后再接收到是WSARecv完成事件,這種情況造成一些問題比如當清理作業完成后IOCP會把這個SOCKET分配給一個新的連接,這個時候可能收到的WSARecv完成事件是原來舊的連接上的。

我在DisconnectEx之前也用過了CancelEx來取消IO但無濟于世,問教大家有什么辦法能在接收到斷開事件前讓WSARecv完成事件先達到,這樣才能順序條理的釋放句柄上的資源。

uj5u.com熱心網友回復:

你不能在WSARecv投遞以后然后回應接收到資料,再這之后再投遞DisconnectEx嗎?

uj5u.com熱心網友回復:

估計你沒有明白我的意思,一般情況下客戶端與服務端建立連接后,服務端總是會提交WSARecv例程來等待客戶端發資料過來,服務端也不知道哪一個包是客戶端發的最后一個包,所以正常情況下服務收到一個包之后會立即投遞下一個WSARecv例程,只有客戶端或服務端主動斷開時才能收到最后的WSARecv的完成事件。

我所描述的問題是DisconnectEx后,WSARecv完成事件是在DiscconectEx完成事件之后到達的,這個不符合我的預期,我期望的是DisconnectEx后,WSARecv完成事件先到達DisconnectEx完成事件后達到。

希望各位能幫忙,謝謝!

uj5u.com熱心網友回復:

自己弄個變數記錄一下,收到不期望的WSARecv完成事件時忽略之?

uj5u.com熱心網友回復:

 zhao4zhong1

-----------------------------------------------------
我目前確實是這樣做的,我的想法就是有沒有其它更好的方法來解決這個問題!希望大家暢所欲言!

uj5u.com熱心網友回復:

參考 4 樓 mynamelj 的回復:
 zhao4zhong1

-----------------------------------------------------
我目前確實是這樣做的,我的想法就是有沒有其它更好的方法來解決這個問題!希望大家暢所欲言!

看來你我這種檔次的英雄所見略同啊!
不知道還有沒有更高端大氣上檔次的英雄供咱倆一同膜拜?

uj5u.com熱心網友回復:

 在WSASend或WSARecv成功后,使用InterlockedIncrement計數
在處理完一個IO請求后,使用InterlockedDecrement計數
當要斷開連接時,標記一個狀態Disconnecting=True,投遞一個IO通知斷開連接(PostDisconnectEx),同時計數+1
收到DisconnectEx的IO時,觸發OnDisconnect后,計數-1

所有可能觸發斷線的地方,判斷Disconnecting是否=True,若Disconnecting=True時,判斷計數是否=0
計數=0時,在一個統一的介面(ReleaseClient)回收相關資源

有程序觸發ReleaseClient時,表示所有IO回傳完成,可以安全回收背景關銑澩

uj5u.com熱心網友回復:

在WSARecv完成事件接收后,在其資料處理后呼叫DisconnectEx,不要無序呼叫

uj5u.com熱心網友回復:

今天正好在重新設計這一套東西,雖然這是個墳,為了以后別人少走彎路,我說下我的處理方法。

首先回答核心問題:不管你的套接字上投遞了多少個事件,一旦你投遞了DisconnectEx,那么所有事件都是并發回傳,除非你使用了單執行緒IOCP,否則他們沒有順序,只有并發。

樓上的觀點取決于你的服務端是不是應答式的,一問一答得機制,確實可以保證“每一個套接字上任何時間只存在一個投遞事件”,這也是C1M以上并發量的做法。

但如果要求網路IO必須是異步的,就不可能滿足“一個套接字上任何時間只存在一個事件” 這一潭訓本要求,甚至從這個問題延申出去的發送資料積壓,也會同時體現出來,當然這里先不說多余的問題。那么為什么我們還需要這種方式呢?答:請參考游戲服務端。

我使用了一個IO控制類(class ioctl)來管理三個 擴展的重疊結構(OVERLAPPEDEX)物件
一個AcceptEx和WSArecv, 
一個DisconnectEX,
一個WSASend.

結構大致如下:
struct OVERLAPPEDEX{
    OVERLAPPED ol;
    ioctl *ctl;
    char *buf;
    unsigned long len;
    int opt;//表示用來IO操作的模式:
    //FD_READ=WSARecv事件
    //FD_WRITE=WSASend事件
    //FD_ACCEPT=AcceptEx事件
    //FD_CLOSE=DisconnectEx事件
};

同時在class ioctl中,有一個int opts; 它可以是 FD_READ,  FD_WRITE,  FD_ACCEPT, FD_CLOSE的任意組合。
在投遞操作之前,OVERLAPPEDEX.opt=具體操作;時,ioctl.opts |= 具體操作;
在事件完成時,ioctl.opts ^= OVERLAPPEDEX.opt;
讀寫都加鎖。

這樣子處理之后,那么服務端只要滿足以下幾個條件,就可以正確的處理這種并發問題:
1、投遞AcceptEx時,必須保證ioctl.opts為0,也就是所有事件都已經回傳。
2、FD_ACCEPT是一個獨立的值,絕對不會包含其他操作共存,當ioctl.opts==FD_ACCEPT時,拒絕之后的所有操作。
3、FD_CLOSE可以與FD_READ,FD_WRITE共存,但是一個套接字在其有效期內,只允許投遞一次FD_CLOSE。
4、一個投遞過FD_CLOSE的套接字,拒絕之后的FD_READ與FD_WRITE操作。



accept:192,168,2,11:65405
2019/09/21 06:40:50 ioctl::read ok!
2019/09/21 06:40:50 IO完成:1, bytes:7
接收完畢!
收到客戶端資料:啦啦啦
2019/09/21 06:40:50 ioctl::_write ok!
2019/09/21 06:40:50 IO完成:2, bytes:13
發送完畢!
2019/09/21 06:40:50 ioctl::read ok!
2019/09/21 06:40:50 ioctl::disconnect ok!
2019/09/21 06:40:50 IO完成:1, bytes:0
2019/09/21 06:40:50 IO完成:32, bytes:0
2019/09/21 06:40:50 ioctl::accept ok!

看日志可以知道,ioctl::read與ioctl::disconnect在一起呼叫了,之后也是并發完成,到最后一個事件完成時,才去把套接字acceptex回去。


題外話1:異步網路IO會帶來發送資料積壓的問題,這個問題沒有什么好辦法來解決,只能限制最大積壓數,超過這個數量,要么斷開連接,要么就把資料拋棄掉。

題外話2:異步網路IO模型并不適合IOCP來處理,應該考慮去linux使用epoll,因為異步網路IO追求的不是并發量。

題外話3:C1M以上的并發量時,IOCP將全面超越epoll,因為應答式服務端上層可以不需要任何讀寫鎖處理,資料可以不需要任何多余的拷貝。

uj5u.com熱心網友回復:

沒這么復雜吧,我記得DisconnectEx引發的WSARecv收不到任何東西或者有其他判斷條件可以判斷。WSARecv完成例程里要先判斷這些條件的,不符合直接rerurn就行了吧。

uj5u.com熱心網友回復:

參考 樓主 mynamelj 的回復:
為了在IOCP中使SOCKET句柄復用,我使用了DisconnectExt函式,一般情況下客戶端與服務端建立連接后,服務端會投遞一個WSARecv例程給IOCP以接收來自客戶端的資料,而服務端主動斷開連接時會投DisconnectEx例程。

問題描述:
當服務端主動提交DisconnectEx例程后正常情況是先收到WSARecv完成事件 然后收到DisconnectEx完成事件并且在DisconnectEx事件中做一些資源清理作業然后把此句柄提交給AcceptEx佇列中。但問題是有時候先接收到的是DisconnectEx完成事件然后再接收到是WSARecv完成事件,這種情況造成一些問題比如當清理作業完成后IOCP會把這個SOCKET分配給一個新的連接,這個時候可能收到的WSARecv完成事件是原來舊的連接上的。

我在DisconnectEx之前也用過了CancelEx來取消IO但無濟于世,問教大家有什么辦法能在接收到斷開事件前讓WSARecv完成事件先達到,這樣才能順序條理的釋放句柄上的資源。



我是回識訓來再使用

轉載請註明出處,本文鏈接:https://www.uj5u.com/gongcheng/35254.html

標籤:網絡編程

上一篇:關于addr.sin_addr.S_un.S_addr的小問題

下一篇:作業系統

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • Git本地庫既關聯GitHub又關聯Gitee

    創建代碼倉庫 使用gitee舉例(github和gitee差不多) 1.在gitee右上角點擊+,選擇新建倉庫 ? 2.選擇填寫倉庫資訊,然后進行創建 ? 3.服務端已經準備好了,本地開始作準備 (1)Git 全域設定 git config --global user.name "成鈺" git c ......

    uj5u.com 2020-09-10 05:04:14 more
  • CODING DevOps 代碼質量實戰系列第二課,相約周三

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。**《DevOps 代碼質量實戰(PHP 版)》**為 CODING DevOps 代碼質量實戰系列的第二課,同時也是本系列的 PHP ......

    uj5u.com 2020-09-10 05:07:43 more
  • 推薦Scrum書籍

    推薦Scrum書籍 直接上干貨,推薦書籍清單如下(推薦有順序的哦) Scrum指南 Scrum精髓 Scrum敏捷軟體開發 Scrum捷徑 硝煙中的Scrum和XP : 我們如何實施Scrum 敏捷軟體開發:Scrum實戰指南 Scrum要素 大規模Scrum:大規模敏捷組織的設計 用戶故事地圖 用 ......

    uj5u.com 2020-09-10 05:07:45 more
  • CODING DevOps 代碼質量實戰系列最后一課,周四發車

    隨著 ToB(企業服務)的興起和 ToC(消費互聯網)產品進入成熟期,線上故障帶來的損失越來越大,代碼質量越來越重要,而「質量內建」正是 DevOps 核心理念之一。 **《DevOps 代碼質量實戰(Java 版)》**為 CODING DevOps 代碼質量實戰系列的最后一課,同時也是本系列的 ......

    uj5u.com 2020-09-10 05:07:52 more
  • 敏捷軟體工程實踐書籍

    Scrum轉型想要做好,第一步先了解并真正落實Scrum,那么我推薦的Scrum書籍是要看懂并實踐的。第二步是團隊的工程實踐要做扎實。 下面推薦工程實踐書單: 重構:改善既有代碼的設計 決議極限編程 : 擁抱變化 代碼整潔代碼 程式員的職業素養 修改代碼的藝術 撰寫可讀代碼的藝術 測驗驅動開發 : ......

    uj5u.com 2020-09-10 05:07:55 more
  • Jenkins+svn+nginx實作windows環境自動部署vue前端專案

    前面文章介紹了Jenkins+svn+tomcat實作自動化部署,現在終于有空抽時間出來寫下Jenkins+svn+nginx實作自動部署vue前端專案。 jenkins的安裝和配置已經在前面文章進行介紹,下面介紹實作vue前端專案需要進行的哪些額外的步驟。 注意:在安裝jenkins和nginx的 ......

    uj5u.com 2020-09-10 05:08:49 more
  • CODING DevOps 微服務專案實戰系列第一課,明天等你

    CODING DevOps 微服務專案實戰系列第一課**《DevOps 微服務專案實戰:DevOps 初體驗》**將由 CODING DevOps 開發工程師 王寬老師 向大家介紹 DevOps 的基本理念,并探討為什么現代開發活動需要 DevOps,同時將以 eShopOnContainers 項 ......

    uj5u.com 2020-09-10 05:09:14 more
  • CODING DevOps 微服務專案實戰系列第二課來啦!

    近年來,工程專案的結構越來越復雜,需要接入合適的持續集成流水線形式,才能滿足更多變的需求,那么如何優雅地使用 CI 能力提升生產效率呢?CODING DevOps 微服務專案實戰系列第二課 《DevOps 微服務專案實戰:CI 進階用法》 將由 CODING DevOps 全堆疊工程師 何晨哲老師 向 ......

    uj5u.com 2020-09-10 05:09:33 more
  • CODING DevOps 微服務專案實戰系列最后一課,周四開講!

    隨著軟體工程越來越復雜化,如何在 Kubernetes 集群進行灰度發布成為了生產部署的”必修課“,而如何實作安全可控、自動化的灰度發布也成為了持續部署重點關注的問題。CODING DevOps 微服務專案實戰系列最后一課:**《DevOps 微服務專案實戰:基于 Nginx-ingress 的自動 ......

    uj5u.com 2020-09-10 05:10:00 more
  • CODING 儀表盤功能正式推出,實作作業資料可視化!

    CODING 儀表盤功能現已正式推出!該功能旨在用一張張統計卡片的形式,統計并展示使用 CODING 中所產生的資料。這意味著無需額外的設定,就可以收集歸納寶貴的作業資料并予之量化分析。這些海量的資料皆會以圖表或串列的方式躍然紙上,方便團隊成員隨時查看各專案的進度、狀態和指標,云端協作迎來真正意義上 ......

    uj5u.com 2020-09-10 05:11:01 more
最新发布
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:41:12 more
  • windows系統git使用ssh方式和gitee/github進行同步

    使用git來clone專案有兩種方式:HTTPS和SSH:
    HTTPS:不管是誰,拿到url隨便clone,但是在push的時候需要驗證用戶名和密碼;
    SSH:clone的專案你必須是擁有者或者管理員,而且需要在clone前添加SSH Key。SSH 在push的時候,是不需要輸入用戶名的,如果配置... ......

    uj5u.com 2023-04-19 08:35:34 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:05:44 more
  • 2023年農牧行業6大CRM系統、5大場景盤點

    在物聯網、大資料、云計算、人工智能、自動化技術等現代資訊技術蓬勃發展與逐步成熟的背景下,數字化正成為農牧行業供給側結構性變革與高質量發展的核心驅動因素。因此,改造和提升傳統農牧業、開拓創新現代智慧農牧業,加快推進農牧業的現代化、資訊化、數字化建設已成為農牧業發展的重要方向。 當下,企業數字化轉型已經 ......

    uj5u.com 2023-04-18 08:00:18 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:20:31 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:55 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:18:51 more
  • 談一談我對協同開發的一些認識

    如今各互聯網公司普通都使用敏捷開發,采用小步快跑的形式來進行專案開發。如果是小專案或者小需求,那一個開發可能就搞定了。但對于電商等復雜的系統,其功能多,結構復雜,一個人肯定是搞不定的,所以都是很多人來共同開發維護。以我曾經待過的商城團隊為例,光是后端開發就有七十多人。 為了更好地開發這類大型系統,往 ......

    uj5u.com 2023-04-17 08:18:00 more
  • 專案管理PRINCE2核心知識點整理

    PRINCE2,即 PRoject IN Controlled Environment(受控環境中的專案)是一種結構化的專案管理方法論,由英國政府內閣商務部(OGC)推出,是英國專案管理標準。
    PRINCE2 作為一種開放的方法論,是一套結構化的專案管理流程,描述了如何以一種邏輯性的、有組織的方法,... ......

    uj5u.com 2023-04-17 08:17:55 more
  • 計算機組成原理—存盤器

    計算機組成原理—硬體結構 二、存盤器 1.概述 存盤器是計算機系統中的記憶設備,用來存放程式和資料 1.1存盤器的層次結構 快取-主存層次主要解決CPU和主存速度不匹配的問題,速度接近快取 主存-輔存層次主要解決存盤系統的容量問題,容量接近與價位接近于主存 2.主存盤器 2.1概述 主存與CPU的聯 ......

    uj5u.com 2023-04-17 08:12:06 more