前言
即使我們都是程式員，但我們也并非都會修電腦，都會做酷炫的ppt，都會優化系統卡頓，其實程式員也是分行業、分專業的，就像醫生也分內外科、呼吸科、神經科神的，
作為非專業的python選手，或者非專業的爬蟲選手，即使我們有一些編程基礎，有時想通過代碼從網上獲取一些資訊，也不能徒手就能做，需要借鑒一些成熟的方案、代碼，
這就是為什么GitHub現在這么流行的原因，作為小白的一番，今天找到一個非常不錯的爬蟲收集專案，推薦給大家，
GitHub搜索技巧
網上也有一些分享的再github上搜索專案的技巧，其實，很多都是從官方檔案來的，所以，我們想真的精通Github搜索，那么就去給官網鏈接上查吧，
- GitHub幫助中心：『https://help.github.com/en/github/searching-for-information-on-github/searching-on-github』
如果覺得英文看著吃力，這里一番也找到一個部分翻譯的文章：
- github 專案搜索技巧-讓你更高效精準地搜索專案：『https://www.cnblogs.com/suwanbin/p/12113751.html』
比如，我們要搜爬蟲相關的，2020年1月1日以后還有更新的，stars數超過100的，可以用這樣的命令：
in:description spider pushed:>2020-01-01 stars:>100
再選擇一下排序，會得到這樣的結果：
awesome-spider
- awesome-spider：『https://github.com/facert/awesome-spider』
這其實是一個整理收集爬蟲專案的專案，對于一番開篇說的非專業爬蟲小戶來講，可以發現很多實用的專案，
不得不說，資源整合的能力有時比創造資源更重要，
我們來看下它收集了哪些專案，有沒有你感興趣的？
A
- 暗網爬蟲(Go)
- 愛絲APP圖片爬蟲
B
- Bilibili 用戶
- Bilibili 視頻
- Bilibili 小視頻
- Bing美圖爬蟲
- B站760萬視頻資訊爬蟲
- 博客園(node.js)
- 百度百科(node.js)
- 北郵人水木清華招聘
- 百度云網盤
- 琉璃神社爬蟲
- Boss 直聘
- 貝殼網找房爬蟲
C
- cnblog
- caoliu 1024
D
- 豆瓣讀書
- 豆瓣爬蟲集
- 豆瓣害羞組
- 豆瓣圖書廣度爬取
- DNS記錄和子域名
- DHT網路磁力種子爬蟲
- 抖音
- 抖音推薦
E
- E紳士
G
- Girl-atlas
- girl13
- github trending
- Github 倉庫及用戶分析爬蟲
- 國家統計用區劃代碼和城鄉劃分代碼爬蟲
H
- HDOJ爬蟲
I
- INC500 世界5000強爬蟲
J
- 京東
- 京東搜索+評論
- 京東商品+評論
- 機票
- 煎蛋妹紙
- 煎蛋妹紙selenium版本
- 今日頭條，網易，騰訊等新聞
- 計算機書籍控圖書
- JK (制服寫真) 爬蟲
K
- 看知乎
- 課程格子校花榜
- konachan
L
- 鏈家
- 鏈家成交在售在租房源
- 拉勾
- 爐石傳說
- leetcode
- 領英銷售導航器爬蟲 LinkedInSalesNavigator
M
- 馬蜂窩 用戶足跡
- MyCar
- 漫畫喵 一鍵下載漫畫~
- MM131性感美女寫真圖全爬取
- 美女寫真套圖爬蟲 （一）（二）（三）
- 妹子圖
- 貓眼網電影評分
N
- 新聞監控
- 你好污啊
O
- ofo共享單車爬蟲
P
- Pixiv
- PornHub
- packtpub
- 91porn
Q
- QQ空間
- QQ 群
- 清華大學網路學堂爬蟲
- 去哪兒
- 前程無憂Python招聘崗位資訊爬取分析
- qqzhpt美女寫真爬蟲/批量下載
R
- 人人影視
- RSS 爬蟲
- rosi 妹子圖
- reddit 壁紙
S
- soundcloud
- Stackoverflow 100萬問答爬蟲
- spider163 網易云音樂爬蟲
- 時光網電影資料和海報爬蟲
T
- tumblr
- 下載tumblr喜歡內容
- TuShare
- 天貓雙12爬蟲
- Taobao mm
- Tmall 女性文胸尺碼爬蟲
- 淘寶直播彈幕爬蟲(node)
- 天涯論壇文章
- 天眼查爬蟲
V
- Youtube字幕下載
- 視頻資訊爬蟲
- 電影網站
W
- 烏云公開漏洞
- 微信公眾號
- “代理”方式抓取微信公眾號文章
- 網易新聞
- 網易精彩評論
- 微博主題搜索分析
- 網易云音樂
- 新.網易熱評
- 唯品會商品
X
- 雪球股票資訊(java)
- 新浪微博
- 新浪微博分布式爬蟲
- 心靈毒雞湯
- 閑魚最新商品爬取
Y
- 英美劇 TV (node.js)
Z
- ZOL 手機壁紙爬蟲
- 知乎(python)
- 知乎(php)
- 知網
- 知乎妹子
- 自如實時房源提醒
- 中國大陸高校串列爬蟲
- 站酷（zcool.com.cn）圖片爬蟲
#
- 80s 影視資源爬蟲 - JianSo_Movie
其他
- 各種爬蟲
- DHT 爬蟲
- SimDHT
- p2pspider
一番霧語：資源整合的能力有時比創造資源更重要，
 |
免費知識星球：一番碼客-積累交流 微信公眾號：一番碼客 微信：Efon-fighting 網站：http://www.efonmark.com |
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/196567.html
標籤：Python