我最近遇到一個問題。我用 python 寫了一個 selenium 爬蟲,自動處理一些任務。現在放在 4 個 windows 服務器上,
我更新爬蟲檔案都是用遠程桌面連接,將新代碼復制粘貼進去,然后關閉正在運行的爬蟲程式,再打開新更換的。
現在還好,以后服務器多了,這樣手動維護總感覺不太對勁。
請教一下有什么好的辦法沒有?如何能夠自動更新代碼并在更新后自動重啟爬蟲 python 程式?有什么工具可以使用嗎?謝謝!
uj5u.com熱心網友回復:
git自動部署腳本一鍵啟動
uj5u.com熱心網友回復:
因該是一個方法uj5u.com熱心網友回復:
寫一個管理系統,對接一個現成的訊息平臺,連接各個爬蟲。管理系統包括爬蟲管理系統,代碼管理系統和任務管理系統。訊息平臺可以采用xmpp服務器。爬蟲讀取分配給它的代碼,任務,完成后將任務結果提交回管理平臺
然后搜索一下,發現有現成的系統
https://juejin.im/post/5c7f9014f265da2d9d1cd34b
轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/28335.html
下一篇:關于python的問題
