Python+Scrapy安裝

抓取網站的代碼實現很多，如果考慮到抓取下載大量內容scrapy框架無疑是一個很好 的工具。Scrapy = Search+Pyton。下面簡單列出安裝過程。PS：一定要按照Python的版本下載，要不然安裝的時候會提醒找不到Python。建議大家安裝 32位是因為有些版本的必備軟件64位不好找。

1.安裝Python

安裝完了記得配置環境，將python目錄和python目錄下的Scripts目錄添加到系統環境變量的Path里。在cmd中輸入python如果出現版本信息說明配置完畢（如下面截圖）。python下載地址。

2.安裝lxml

lxml是一種使用 Python 編寫的庫，可以迅速、靈活地處理 XML。點擊 這里選擇對應的Python版本安裝。驗證是否安裝成功，如下圖。


3.安裝setuptools

用來安裝egg文件，點擊 這里下載python2.7的對應版本的setuptools。

4.安裝zope.interface

可以使用第三步下載的setuptools來安裝egg文件，現在也有exe版本，點擊這里下載。

5.安裝Twisted

Twisted是用Python實現的基于事件驅動的網絡引擎框架，點擊這里下載。

6.安裝pyOpenSSL

pyOpenSSL是Python的OpenSSL接口，點擊 這里下載。

7.安裝win32py

提供win32api，點擊 這里下載

8.安裝Scrapy

終于輪到安裝scrapy了，直接在cmd中輸入easy_install scrapy回車即可。安裝后在cmd命令行進行成功與否的驗證如圖所示。

安裝完成，開始使用吧！