X同學發私信說想要微信讀書上的書籍清單做測驗用,嚇我一跳,原以為是要爬取APP呢,付訓了新筆記本難道要配置新的開發環境,結果是爬取一個PC端的網站,虛驚一場,
爬蟲百例教程導航鏈接 : https://blog.csdn.net/hihell/article/details/86106916
寫在前面
本篇博客要爬取的頁面是微信讀書的PC端頁面,不過并不是把書籍下載下來,只是抓取資訊,所以整體實作難度不大,為了簡化操作,我將書籍分類與書籍數目做成可輸入項,
頁面地址為:https://weread.qq.com/
要爬取的資料為:

點擊具體某一分類榜單,地址為: https://weread.qq.com/web/category/100000 后面的數字ID是類別號,頁面下拉重繪,加載的頁面是
CSDN認證博客專家
大學老師
高級產品經理
互聯網從業者
沉迷各種技術無法自拔,導致年齡被困在25歲;CSDN爬蟲百例作者,
個人公眾號“非本科程式員”,
轉載請註明出處,本文鏈接:https://www.uj5u.com/qianduan/143371.html
標籤:其他
下一篇:spring如何解決回圈依賴
