python3獲取url文件大小示例代碼
在python3中,urllib2被替換為urllib.requeset,因此頭文件中添加
import urllib.request as urllib2
def getRemoteFileSize(url, proxy=None):
""" 通過content-length頭獲取遠程文件大小
url - 目標文件URL
proxy - 代理 """
opener = urllib2.build_opener()
if proxy:
if url.lower().startswith('https://'):
opener.add_handler(urllib2.ProxyHandler({'https' : proxy}))
else:
opener.add_handler(urllib2.ProxyHandler({'http' : proxy}))
try:
request = urllib2.Request(url)
request.get_method = lambda: 'HEAD'
response = opener.open(request)
response.read()
except Exception:
return 0
else:
print(response.headers)
fileSize = dict(response.headers).get('content-length', 0)
return int(fileSize)
使用上段代碼發(fā)現(xiàn)輸出為0,考慮應該是沒查詢到content-length字段,打印response.headers字段后,發(fā)現(xiàn)content-length字段應改為Content-Length,改后正常

def getRemoteFileSize(url, proxy=None):
""" 通過content-length頭獲取遠程文件大小
url - 目標文件URL
proxy - 代理 """
opener = urllib2.build_opener()
if proxy:
if url.lower().startswith('https://'):
opener.add_handler(urllib2.ProxyHandler({'https' : proxy}))
else:
opener.add_handler(urllib2.ProxyHandler({'http' : proxy}))
try:
request = urllib2.Request(url)
request.get_method = lambda: 'HEAD'
response = opener.open(request)
response.read()
except Exception:
return 0
else:
print(response.headers)
fileSize = dict(response.headers).get('Content-Length', 0)
return int(fileSize)
總結(jié)
以上所述是小編給大家介紹的python3獲取url文件大小示例代碼,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
如果你覺得本文對你有幫助,歡迎轉(zhuǎn)載,煩請注明出處,謝謝!
相關(guān)文章
解決python 出現(xiàn)unknown encoding: idna 的問題
這篇文章主要介紹了解決python出現(xiàn) unknown encoding: idna 的問題,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-03-03
11個Python Pandas小技巧讓你的工作更高效(附代碼實例)
這篇文章主要介紹了11個Python Pandas小技巧讓你的工作更高效(附代碼實例),小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-04-04
Scrapy-redis爬蟲分布式爬取的分析和實現(xiàn)
所謂的scrapy-Redis實際上就是scrapy+redis,其中對redis的操作采用redis-py客戶端。下面這篇文章詳細介紹了Scrapy-redis爬蟲分布式爬取的分析和實現(xiàn),需要的朋友可以參考借鑒,下面來一起看看吧。2017-02-02
Python ORM框架SQLAlchemy學習筆記之數(shù)據(jù)添加和事務回滾介紹
這篇文章主要介紹了Python ORM框架SQLAlchemy學習筆記之數(shù)據(jù)添加和事務回滾介紹,需要的朋友可以參考下2014-06-06
Django模板導入母版繼承和自定義返回Html片段過程解析
這篇文章主要介紹了Django模板導入母版繼承和自定義返回Html片段過程解析,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-09-09

