今天主要介紹一下在Windows下安裝pyspider,pyspider是一款用python編寫的網路爬蟲框架,這個框架最好是在linux下運行,Windows下運行可能會出現相容性問題,如果實在要在Windows下運行,最好選擇32位版本,64位版本可能會出現運行崩潰問題。 1、要安裝pyspid ...
今天主要介紹一下在Windows下安裝pyspider,pyspider是一款用python編寫的網路爬蟲框架,這個框架最好是在linux下運行,Windows下運行可能會出現相容性問題,如果實在要在Windows下運行,最好選擇32位版本,64位版本可能會出現運行崩潰問題。
1、要安裝pyspider首先要安裝python,剛纔說了,最好安裝32位版本的。
下載地址:https://www.python.org/downloads/windows/
2、pycurl也是pyspider運行必要的插件,安裝時要對應python安裝的版本。
下載地址:https://bintray.com/pycurl/pycurl/pycurl/view#files
這裡註意一點:一般安裝python時已經安裝了對應的pycurl,如果沒有安裝,就單獨安裝一下。(我一開始安裝python 3.7,安裝後發現沒有安裝pycurl,然後我看下載鏈接中沒有對應3.7版本的pycurl,所以又卸載重新安裝python 3.5,發現自動安裝了pycurl)
3、安裝好後要配置python環境變數。這裡主要寫兩個路徑,一個是python目錄,一個是python目錄下的scripts目錄(這個主要是為了能使用pip命令)。
這裡有個技巧,可以不用自己手動添加,在安裝python時有個勾選框(add python to path),預設時不勾選的,如果勾選會自動添加環境變數。
4、 打開cmd,輸入安裝命令:pip install pyspider
5、輸入運行命令:pyspider
6、運行成功後,在瀏覽器中打開 http://localhost:5000,出現如下界面,說明可以開始使用了。