python中安裝Scrapy模塊依賴包匯總

更新時間：2017年07月02日 10:20:25 作者：lon.y@qq.com

Scrapy的安裝有一些依賴包,沒有這些包是會安裝失敗的，下面我們就來詳細(xì)探討下

本地虛擬環(huán)境開發(fā)完成之后，上線過程中需要一一安裝依賴包，做個記錄如下：

CentOS 安裝python3.5.3

wget https://www.python.org/ftp/python/3.5.3/Python-3.5.3.tgz
tar -xf Python-3.5.3.tgz cd Python-3.5.3
./configure --prefix=/usr/local/python353 make &amp; make install

完成安裝python3.5.3，在不刪除系統(tǒng)自帶的python2.x情況下，做幾個軟鏈：

#做python3軟鏈
ln -s /usr/local/python353/bin/python3 /usr/local/bin/
#pip3軟鏈
ln -s /usr/local/python353/bin/pip3 /usr/local/bin/

上傳程序，安裝scrapy及其依賴包：

#user agent包
pip3 install fake-useragent -i https://pypi.douban.com/simple/
#pymysql包
pip3 install pymysql -i https://pypi.douban.com/simple/
#PooledDB依賴包
pip3 install DBUtils -i https://pypi.douban.com/simple/
#PIL模塊依賴包
pip3 install Image -i https://pypi.douban.com/simple/

在Centos系統(tǒng)中安裝過程中，出現(xiàn)一個較為淡疼的問題：系統(tǒng)沒有安裝sqlite3，故此一直提示：
解決上面問題，下載sqlite3

sudo wget http://www.sqlite.org/2017/sqlite-autoconf-3190300.tar.gz

編譯安裝：

tar zxvf sqlite-autoconf-3190300.tar.gz cd sqlite-autoconf-3190300
./configure --prefix=/usr/local/sqlite3
make && make install

重新編譯Python，找到Python3.5.3的安裝文件路徑，編輯setup.py腳本，找到 “sqlite3”

sqlite_inc_paths = [ '/usr/include',
'/usr/include/sqlite',
'/usr/include/sqlite3',
'/usr/local/include',
'/usr/local/include/sqlite',
'/usr/local/include/sqlite3',
]

在最后一行加入sqlite3編譯安裝路徑，如下：

sqlite_inc_paths = [ '/usr/include',
'/usr/include/sqlite',
'/usr/include/sqlite3',
'/usr/local/include',
'/usr/local/include/sqlite',
'/usr/local/include/sqlite3',
'/usr/local/sqlite3',
]

重新編譯Python3.5.3:

./configure --prefix=/usr/local/python353
make && make install

您可能感興趣的文章:

相關(guān)文章

圖文詳解在Anaconda安裝Pytorch的詳細(xì)步驟
Anaconda指的是一個開源的Python發(fā)行版本,其包含了conda、Python等180多個科學(xué)包及其依賴項,下面這篇文章主要給大家介紹了關(guān)于在Anaconda安裝Pytorch的詳細(xì)步驟,需要的朋友可以參考下
2022-07-07
Python 多進(jìn)程原理及實現(xiàn)
這篇文章主要介紹了Python 多進(jìn)程原理及實現(xiàn)，幫助大家更好的理解和使用python，感興趣的朋友可以了解下
2020-12-12
python程序封裝為win32服務(wù)的方法
這篇文章主要為大家詳細(xì)介紹了python程序封裝為win32服務(wù)的方法，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價值，感興趣的小伙伴們可以參考一下
2018-11-11
使用Python和NLTK進(jìn)行文本預(yù)處理示例詳解
文將介紹如何使用Python編程語言和NLTK（Natural Language Toolkit）庫進(jìn)行文本預(yù)處理,為后續(xù)的文本分析和機(jī)器學(xué)習(xí)任務(wù)做準(zhǔn)備,文中有詳細(xì)的代碼示例供大家參考,需要的朋友可以參考下
2024-03-03
pandas 按日期范圍篩選數(shù)據(jù)的實現(xiàn)
這篇文章主要介紹了pandas 按日期范圍篩選數(shù)據(jù)的實現(xiàn)，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
2021-02-02
Python 在字符串中加入變量的實例講解
下面小編就為大家分享一篇Python 在字符串中加入變量的實例講解，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
2018-05-05
Python自動化構(gòu)建工具scons使用入門筆記
這篇文章主要介紹了Python自動化構(gòu)建工具scons使用入門筆記,本文講解了安裝scons、scons常用命令、scons使用示例等內(nèi)容,需要的朋友可以參考下
2015-03-03
python實現(xiàn)在控制臺輸入密碼不顯示的方法
這篇文章主要介紹了python實現(xiàn)在控制臺輸入密碼不顯示的方法,實例分析了Python基于console模塊實現(xiàn)密碼顯示星號輸入的技巧,需要的朋友可以參考下
2015-07-07
Python 讀取用戶指令和格式化打印實現(xiàn)解析
這篇文章主要介紹了Python 讀取用戶指令和格式化打印實現(xiàn)解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下
2019-09-09
Python辦公自動化之文件的比較合并與xml操作
這篇文章主要為大家詳細(xì)介紹了Python辦公自動化之文件的比較合并與xml文件操作的相關(guān)知識,文中的示例代碼講解詳細(xì),需要的可以參考一下
2023-12-12