Python urllib.request對象案例解析
更新時間：2020年05月11日 09:50:22 作者：孤燈引路人
這篇文章主要介紹了Python urllib.request對象案例解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下
剛剛接觸爬蟲，基礎(chǔ)的東西得時時回顧才行，這么全面的帖子無論如何也得厚著臉皮轉(zhuǎn)過來??！
什么是 Urllib 庫？
urllib 庫 是 Python 內(nèi)置的 HTTP 請求庫。urllib 模塊提供的上層接口，使訪問 www 和 ftp 上的數(shù)據(jù)就像訪問本地文件一樣。
有以下幾種模塊：
1.urllib.request 請求模塊
2. urllib.error 異常處理模塊
3. urllib.parse url 解析模塊
4. urllib.robotparser robots.txt 解析模塊
Urllib 庫下的幾種模塊基本使用如下：
urllib.request
關(guān)于 urllib.request： urllib.request 模塊提供了最基本的構(gòu)造 HTTP （或其他協(xié)議如 FTP）請求的方法，利用它可以模擬瀏覽器的一個請求發(fā)起過程。利用不同的協(xié)議去獲取 URL 信息。它的某些接口能夠處理基礎(chǔ)認(rèn)證 （ Basic Authenticaton） 、redirections （HTTP 重定向)、 Cookies (瀏覽器 Cookies）等情況。而這些接口是由 handlers 和 openers 對象提供的。
1.常用的方法有
- read()==讀取文件內(nèi)容
- geturl()==獲取請求url
- getheaders()==獲取http請求頭信息
- getcode()==獲取狀態(tài)碼
- readlines()==獲取一行
2.案例
#coding=utf-8
#import urllib.request
#=========response方法使用
#read()==讀取文件內(nèi)容
#geturl()==獲取請求url
#getheaders()==獲取http請求頭信息
#getcode()==獲取狀態(tài)碼
#readlines()==獲取一行
#url="http://www.baidu.com";
#response = urllib.request.urlopen(url);
#=====案例1
# str = response.read().decode();#這樣通過decode轉(zhuǎn)換為utf8
# with open("baidu.html","w",encoding="utf8") as fp:
# fp.write(str);
#=====案例2通過字節(jié)流寫=默認(rèn)通過read讀取的是字節(jié)流
# with open("bai.html","wb") as fp:
# fp.write(response.read());
#==使用字節(jié)流讀取存圖片
# image_url='https://ss3.bdstatic.com/70cFv8Sh_Q1YnxGkpoWK1HF6hhy/it/u=3772530225,1800402028&fm=26&gp=0.jpg';
# response = urllib.request.urlopen(image_url);
# with open("mv.jpg",'wb') as fp:
# fp.write(response.read());
#案例3==使用內(nèi)置函數(shù)讀取圖片
#image_url='https://ss3.bdstatic.com/70cFv8Sh_Q1YnxGkpoWK1HF6hhy/it/u=3772530225,1800402028&fm=26&gp=0.jpg';
#urllib.request.urlretrieve(image_url,"chun.jpg");
以上就是本文的全部內(nèi)容，希望對大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
您可能感興趣的文章:
- python urllib.request模塊的使用詳解
- python 如何用urllib與服務(wù)端交互(發(fā)送和接收數(shù)據(jù))
- python urllib和urllib3知識點(diǎn)總結(jié)
- python爬蟲基礎(chǔ)之urllib的使用
- Python urllib request模塊發(fā)送請求實現(xiàn)過程解析
- Python urllib3軟件包的使用說明
- Python urllib庫如何添加headers過程解析
- 詳解python內(nèi)置模塊urllib
- python3 中使用urllib問題以及urllib詳解
- Python urllib2運(yùn)行過程原理解析
- python中urllib.request和requests的使用及區(qū)別詳解
- python urllib庫的使用詳解
相關(guān)文章
Flask是一個使用 Python 編寫的輕量級 Web 應(yīng)用框架。其 WSGI 工具箱采用 Werkzeug ，模板引擎則使用 Jinja2 。Flask使用 BSD 授權(quán)。Flask也被稱為 “microframework” ，因為它使用簡單的核心，用 extension 增加其他功能，F(xiàn)lask中Cookie和Session有什么區(qū)別呢2022-10-10
conda是一個包，依賴和環(huán)境管理工具，適用于多種語言，如: Python, R, Scala, Java, Javascript, C/ C++, FORTRAN，這篇文章主要介紹了python的環(huán)境conda簡介,需要的朋友可以參考下2022-09-09
AKShare是一個開源財經(jīng)數(shù)據(jù)接口庫,本文主要介紹了Python股票開源庫akshare的具體使用,具有一定的參考價值,感興趣的可以了解一下2024-04-04
這篇文章主要介紹了python爬蟲模擬瀏覽器的兩種方法,結(jié)合實例形式分析了Python爬蟲模擬瀏覽器的兩種常見操作技巧與使用注意事項,需要的朋友可以參考下2019-12-12
這篇文章主要介紹了Python實現(xiàn)FM算法解析，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-06-06
Python異常處理是Python中重要的一部分，為了保證程序的穩(wěn)定性和可靠性，我們需要使用異常處理來及時捕獲，并以優(yōu)雅的方式來處理這些異常，本教程將介紹如何處理?Python中的異常,需要的朋友可以參考下2023-06-06
TransBigData是一個為交通時空大數(shù)據(jù)處理、分析和可視化而開發(fā)的Python包。本文就來用它實現(xiàn)個人手機(jī)定位分析，感興趣的小伙伴可以了解一下2023-04-04
這篇文章主要為大家詳細(xì)介紹了python實現(xiàn)電子產(chǎn)品商店，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-02-02
cachetools庫為Python提供了強(qiáng)大而靈活的緩存解決方案,通過使用不同類型的緩存和緩存裝飾器,我們可以輕松地在程序中實現(xiàn)高效的緩存機(jī)制,從而提升程序性能,本文將詳細(xì)介紹cachetools庫的基本概念和使用方法,感興趣的朋友跟隨小編一起看看吧2024-07-07
這篇文章主要介紹了Python實現(xiàn)螺旋矩陣的填充算法,結(jié)合實例形式分析了Python實現(xiàn)螺旋矩陣的相關(guān)循環(huán)、遍歷、判斷、運(yùn)算等操作技巧,需要的朋友可以參考下2017-12-12