有個模塊的功能跟爬蟲一樣,我的做法是創建了5個執行緒,在每個執行緒中都保存了一個CInternetSession物件,在執行緒中呼叫那個發送HTTP請求的函式,傳進去這個CInternetSession物件(注意這個物件是傳進去的),我發現這樣爬行的效率好像挺高的,因為避免了重復創建CInternetSession物件,但是現在出現了一個很詭異的問題,就是有的時候發送HTTP請求之后就一直假死了,完了還不報錯,我想問問各位遇到過這樣的問題嗎,還有就是實作爬蟲一般都用什么技術。
uj5u.com熱心網友回復:
而且我還設定了2秒鐘的超時時間,我看網上的弟兄們說,這個類的這個超時功能貌似還有點BUG。uj5u.com熱心網友回復:
參考WebCHM(原WebSeizer測驗版)
uj5u.com熱心網友回復:
趙老師
轉載請註明出處,本文鏈接:https://www.uj5u.com/gongcheng/136506.html
標籤:基礎類
