windows10系統(tǒng)中安裝python3.x+scrapy教程
官網(wǎng)下載就好, https://www.python.org/downloads/release/python-352/

用installer下載比較方便,它直接把環(huán)境變量都幫你配了。
當(dāng)然也可以在本站下載 http://www.dhdzp.com/softs/416037.html
升級(jí)pip
安裝好之后在cmd里執(zhí)行
python -m pip install -upgrade pip
把pip提到最新版本

下載lxml
lxml是解析網(wǎng)頁用的,scrapy依賴于它,它是一個(gè)第三方的庫,這里推薦一個(gè)python第三方庫的網(wǎng)站
http://www.lfd.uci.edu/~gohlke/pythonlibs/ ,里邊都是編譯好的,windows下python使用者的福利。
Ctrl+F定位一下lxml

注意:打開網(wǎng)址后ctrl+F,搜索LXML,選擇對(duì)應(yīng)版本,一般是win32,而不選win_arm64,即使電腦是win64
下載好之后,cmd進(jìn)入下載目錄,直接用pip安裝
pip install lxml-3.6.4-cp35-cp35m-win_32.whl
安裝scrapy
pip安裝最方便
pip install scrapy
查看版本
scrapy version
輸出應(yīng)該是Scrapy 1.2.1,也是官網(wǎng)的最新版本。
可能遇到的問題
以下內(nèi)容匯總了csdn和stackoverflow部分內(nèi)容
1.Python error: Unable to find vcvarsall.bat
安裝MinGW(實(shí)測)
1、下載安裝MinGW,下載地址為:點(diǎn)擊打開鏈接
2、在MinGW的安裝目錄下找到bin文件夾,找到mingw32-make.exe,復(fù)制一份更名為make.exe
3、把MinGW的路徑添加到環(huán)境變量path中,比如我把MinGW安裝到D:\MinGW\中,就把D:\MinGW\bin添加到path中;
4、在<python安裝目錄>\distutils(需要在python安裝目錄下ctrl+f一下distutils)增加文件distutils.cfg,在文件里輸入
[build] compiler=mingw32
保存;
2、error: command‘gcc'failed: No such file or directory
解決方案是將D:\MinGW\lib再添加到PATH中。
3、ValueError: Unknown MS Compiler version 1900
Cygwinccompiler.py中
get_msvcr()函數(shù)
在
elif msc_ver == '1600': # VS2010 / MSVC 10.0 return ['msvcr100']
后面,添加以下內(nèi)容
elif msc_ver == '1700': # Visual Studio 2012 / Visual C++ 11.0 return ['msvcr110'] elif msc_ver == '1800': # Visual Studio 2013 / Visual C++ 12.0 return ['msvcr120'] elif msc_ver == '1900': # Visual Studio 2015 / Visual C++ 14.0 # "msvcr140.dll no longer exists" http://blogs.msdn.com/b/vcblog/archive/2014/06/03/visual-studio-14-ctp.aspx return ['vcruntime140']
然后將python3.5文件夾下的vcruntime140.dll復(fù)制到D:\MinGW\mingw32\lib下
4、TypeError: unorderable types: NoneType() >= str()
重啟一下試試
5、error: The 'pyasn1' distribution was not found and is required by service-identity
在運(yùn)行一下setup.py試試
以上就是本文的全部內(nèi)容了,希望對(duì)大家學(xué)習(xí)python能夠有所幫助。
- 在python3.9下如何安裝scrapy的方法
- Python3環(huán)境安裝Scrapy爬蟲框架過程及常見錯(cuò)誤
- 圖文詳解python安裝Scrapy框架步驟
- 詳解Python網(wǎng)絡(luò)框架Django和Scrapy安裝指南
- 詳解Python安裝scrapy的正確姿勢
- mac下給python3安裝requests庫和scrapy庫的實(shí)例
- Python之Scrapy爬蟲框架安裝及簡單使用詳解
- Python2.7下安裝Scrapy框架步驟教程
- Python3安裝Scrapy的方法步驟
- python安裝Scrapy圖文教程
- python中安裝Scrapy模塊依賴包匯總
- 在Linux系統(tǒng)上安裝Python的Scrapy框架的教程
- Python安裝Scrapy庫的常見報(bào)錯(cuò)解決
相關(guān)文章
Gauss-Seidel迭代算法的Python實(shí)現(xiàn)詳解
這篇文章主要介紹了Gauss-Seidel迭代算法的Python實(shí)現(xiàn)詳解,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-06-06
python3模擬百度登錄并實(shí)現(xiàn)百度貼吧簽到示例分享(百度貼吧自動(dòng)簽到)
這篇文章主要介紹了python3模擬百度登錄并實(shí)現(xiàn)百度貼吧簽到示例,需要的朋友可以參考下2014-02-02
python求最大值,不使用內(nèi)置函數(shù)的實(shí)現(xiàn)方法
今天小編就為大家分享一篇python求最大值,不使用內(nèi)置函數(shù)的實(shí)現(xiàn)方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-07-07
淺談python 線程池threadpool之實(shí)現(xiàn)
這篇文章主要介紹了淺談python 線程池threadpool之實(shí)現(xiàn),小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2017-11-11
python廣度優(yōu)先搜索得到兩點(diǎn)間最短路徑
2019-01-01

