執(zhí)行命令：

pip3 install pyspider

Windows 下可能會(huì)出現(xiàn)這樣的錯(cuò)誤提示：Command "python setup.py egg_info" failed with error code 1 in /tmp/pip-build-vXo1W3/pycurl

這個(gè)是 PyCurl 安裝錯(cuò)誤，一般會(huì)出現(xiàn)在 Windows 下，需要安裝 PyCurl 庫(kù)，下載鏈接為：http://www.lfd.uci.edu/~gohlke/pythonlibs/#pycurl，找到對(duì)應(yīng) Python 版本然后下載相應(yīng)的 Wheel 文件。

如 Windows 64 位，Python3.6 則下載 pycurl?7.43.0?cp36?cp36m?win_amd64.whl，隨后用 Pip 安裝即可，命令如下：

pip3 install pycurl?7.43.0?cp37?cp37m?win_amd64.whl

這里的pycurl-7.43.0-cp37m-win_amd64.whl是下載下來(lái)的文件路徑

執(zhí)行命令驗(yàn)證：

pyspider all

出現(xiàn)錯(cuò)誤：SyntaxError: invalid syntax

原因是：python3.7中async是關(guān)鍵字

解決辦法：將這個(gè)關(guān)鍵字替換掉。主要有兩個(gè)文件：~\Lib\site-packages\pyspider\run.py 和 ~\Lib\site-packages\pyspider\fetcher\tornado_fetcher.py

在替換是要注意：只替換名為async 的變量或參數(shù)名。不要圖省事選擇“全部替換”

替換保存后再次運(yùn)行“pyspider all”

這時(shí)spider只啟動(dòng)到“scheduler xmlrpc listening on 127.0.0.1:23333”就停止了

繼續(xù)替換PYTHON_HOME\Lib\site-packages\pyspider\webui\app.py中的async

再次啟動(dòng)

又報(bào)錯(cuò)：ValueError: Invalid configuration:

-Deprecated option ‘domaincontroller’: use ‘http_authenticator.domain_controller’ instead.

解決辦法：打開(kāi)PYTHON_HOME\Lib\site-packages\pyspider\webui\webdav.py文件，修改第209行

把 ‘domaincontroller’: NeedAuthController(app)

修改為：

‘http_authenticator’:{

‘HTTPAuthenticator’:NeedAuthController(app),

},

保存文件

再次運(yùn)行，成功

這是訪問(wèn)http://localhost:5000就能打開(kāi)pyspider的圖形界面了

總結(jié)

以上是生活随笔為你收集整理的python3.7安装pyspider安装教程_Windows环境下Python3安装Pyspider的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。