??大家好，我是不溫卜火，是一名計算機學院大資料專業大三的學生，昵稱來源于成語—不溫不火，本意是希望自己性情溫和，作為一名互聯網行業的小白，博主寫博客一方面是為了記錄自己的學習程序，另一方面是總結自己所犯的錯誤希望能夠幫助到很多和自己一樣處于起步階段的萌新，但由于水平有限，博客中難免會有一些錯誤出現，有紕漏之處懇請各位大佬不吝賜教！暫時只有csdn這一個平臺，博客主頁：https://buwenbuhuo.blog.csdn.net/

官網地址：https://scrapy.org/

??本文主要講的是簡單一文學會如何安裝Scrapy并創建專案，

宣告：官方檔案有很詳細的安裝程序，本博主只是使其能夠令讀者能夠更好的理解，

??官方檔案地址：https://docs.scrapy.org/en/latest/intro/install.html#intro-install

??官方GitHub地址：https://github.com/scrapy/scrapy/blob/2.3/docs/intro/install.rst

Scrapy需要使用Python 3.5.2+，或者CPython實作（默認）或PyPy 5.9+實作，

小知識(如果懂此部分可自行略過此部分，如果使新手可以適當了解)：
① 什么使Cpython？

• CPython：這是Python的官方版本，使用C語言實作，使用最為廣泛，新的語言特性一般也最先出現在這里，
• CPython實作會將源檔案（py檔案）轉換成位元組碼檔案（pyc檔案），然后運行在Python虛擬機上，
• 同時CPython是一種被廣泛使用的python解釋器,類似的解釋器還有pypy,JPython等等

② PyPy是用Python實作的Python解釋器，

一. 為什么推薦Anaconda或Miniconda？[此處為官方檔案的解釋，但是博主不建議使用此方式]

??如果你使用的是Anaconda或Miniconda，則可以從conda- forge渠道安裝該軟體包，該渠道包含適用于Linux，Windows和macOS的最新軟體包，

• 如果要使用conda安裝Scrapy，請運行：

conda install -c conda-forge scrapy

• 如果您已經熟悉Python軟體包的安裝，則可以使用以下方法從PyPI安裝Scrapy及其依賴項

pip install Scrapy

??在此需要注意的是，在有些時候，可能需要解決某些Scrapy依賴項的編譯問題，這些具體取決與每個人的作業系統，因此在安裝Scrapy時，請務必查看特定的平臺的安裝說明，

平臺特定的安裝說明(Platform specific installation notes)

1.1 Windows

??在Windows中盡管可以使用pip安裝Scrapy，但是仍然建議安裝Anaconda或Miniconda并使用conda - forge渠道中的軟體包 ，這將避免大多數安裝問題，

??在安裝安裝Anaconda或Miniconda后，請使用以下方法安裝Scrapy

conda install -c conda-forge scrapy

1.2 Ubuntu(14.04或更高版本)

??目前，Scrapy已使用最新版本的lxml，twisted和pyOpenSSL進行了測驗，并且與最新的Ubuntu發行版兼容，盡管在Ubuntu 14.04中存在TLS連接的潛在問題，但是它也應該支持Ubuntu的較早版本，

不要使用Ubuntu提供的python-scrapy軟體包，它們通常版本太舊且下載太慢，無法趕上最新的Scrapy，

• 如果要在Ubuntu（或基于Ubuntu的）系統上安裝Scrapy，您需要安裝以下依賴項：

sudo apt-get install python3 python3-dev python3-pip libxml2-dev libxslt1-dev zlib1g-dev libffi-dev libssl-dev

• python3-dev，zlib1g-dev，libxml2-dev和libxslt1-dev 是lxml所需要的
• libssl-dev和libffi-dev是cryptography所必須的
• 在virtualenv內部，你可以pip安裝Scrapy

pip install scrapy

注意：
可以使用相同的非Python依賴項在Debian Jessie（8.0）及更高版本中安裝Scrapy，

1.3 為什么推薦使用虛擬環境？

TL; DR：建議在所有平臺上的虛擬環境中安裝Scrapy，

Python軟體包可以全域安裝（也稱為系統范圍），也可以安裝在用戶空間中，但是并不建議在整個系統中安裝Scrapy，

在所謂的“虛擬環境”（venv）中安裝Scrapy ，虛擬環境能夠盡可能減少與已經安裝的Python系統軟體包不沖突（但這可能會破壞某些系統工具和腳本），并且仍然可以正常安裝軟體包pip（不帶sudo類似的東西），

• 1. 虛擬環境的簡單介紹

Python應用程式通常會使用標準庫中未包含的軟體包和模塊，應用程式有時會需要特定版本的庫，因為應用程式可能需要修復特定的錯誤，或者使用庫介面的過時版本來撰寫應用程式，

這意味著一個Python安裝可能無法滿足每個應用程式的要求，

如果應用程式A需要特定模塊的版本1.0，而應用程式B需要版本2.0，則這些要求存在沖突，并且安裝版本1.0或2.0將使一個應用程式無法運行，

解決此問題的方法是創建一個虛擬環境，這是一個獨立的目錄樹，其中包含針對特定版本的Python的Python安裝以及許多其他軟體包，

然后，不同的應用程式可以使用不同的虛擬環境，為了解決需求沖突的早期示例，應用程式A可以擁有自己的虛擬環境，安裝了1.0版，而應用程式B擁有另一個虛擬環境，具有2.0版，如果應用程式B需要將庫升級到版本3.0，則不會影回應用程式A的環境，

• 2. 創建虛擬環境(venv)

用于創建和管理虛擬環境的模塊稱為 venv， venv通常會安裝可用的最新版本的Python，如果您的系統上有多個Python版本，則可以通過運行python3或所需的任意版本來選擇特定的Python版本，

要創建虛擬環境，請確定要放置虛擬目錄的位置，然后venv使用目錄路徑作為腳本運行模塊：

python3 -m venv tutorial-env

tutorial-env如果該目錄不存在，它將創建一個目錄，并在其中創建包含Python解釋器，標準庫和各種支持檔案的副本的目錄，

虛擬環境的通用目錄位置是.venv，該名稱通常使目錄隱藏在您的外殼中，因此不會干擾目錄，同時為其提供一個解釋該目錄存在原因的名稱，它還可以防止與.env某些工具支持的環境變數定義檔案發生沖突，

創建虛擬環境后，可以激活它，

在Windows上，運行：

tutorial-env\Scripts\activate.bat

在Unix或MacOS上，運行：

source tutorial-env/bin/activate

在創建虛擬環境后，你就可以和pip其他任何Python軟體包一樣，將Scrapy安裝在其中，

二. Scrapy的安裝程序

上述是屬于理論解釋部分，此部分則為最重要的安裝部分，由于博主本人的電腦為windows系統，所以演示也是在windows系統下進行安裝，Linux的安裝方法，博主在時間空閑的情況下，可能會進行更新操作，

2.1 通過cmd命令列安裝Scrapy

??由于博主已經安裝過了，所以會出現上述的情況，如果沒有安裝，是需要等待一段時間的，

pip install scrapy

2.2 通過集成開發工具Pycharm安裝Scrapy

通過此方式安裝Scrapy就很傻瓜式操作了，話不多說，看我操作：

具體程序：File -> Settings -> project interpreter -> + -> 搜索：Scrapy -> install package

三. Scrapy的創建程序

3.1 cmd命令列下創建Scrapy

# 命令如下
# 進入想要存放的目錄
F:\>cd Python專案
# 創建存放檔案夾
F:\Python專案>mkdir ScrapyTest
# 進入檔案夾
F:\Python專案>cd ScrapyTest
# 創建專案
F:\Python專案\ScrapyTest>scrapy startproject bd
# 進入所創建專案的檔案夾
F:\Python專案\ScrapyTest>cd bd
# 
F:\Python專案\ScrapyTest\baidu>scrapy genspider baidu "baidu.com"

下面為具體操作程序：

3.2 使用Pycharm創建Scrapy

使用Pycharm的命令視窗創建Scrapy，在這時候就可以看到上文所提到的虛擬環境(venv)

下面為具體操作程序：

??美好的日子總是短暫的，雖然還想繼續與大家暢談，但是本篇博文到此已經結束了，如果還嫌不夠過癮，不用擔心，我們下篇見！

??好書不厭讀百回，熟讀課思子自知，而我想要成為全場最靚的仔，就必須堅持通過學習來獲取更多知識，用知識改變命運，用博客見證成長，用行動證明我在努力，
??如果我的博客對你有幫助、如果你喜歡我的博客內容，請“點贊” “評論”“收藏”一鍵三連哦！聽說點贊的人運氣不會太差，每一天都會元氣滿滿呦！如果實在要白嫖的話，那祝你開心每一天，歡迎常來我博客看看，
??碼字不易，大家的支持就是我堅持下去的動力，點贊后不要忘了關注我哦！