Python爬蟲:將headers請求頭字符串轉(zhuǎn)為字典的方法
更新時間：2019年08月21日 16:22:16 作者：彭世瑜
今天小編就為大家分享一篇Python爬蟲:將headers請求頭字符串轉(zhuǎn)為字典的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
原生請求頭字符串
raw_headers = """Host: open.tool.hexun.com Pragma: no-cache Cache-Control: no-cache User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.84 Safari/537.36 Accept: */* Referer: http://stock.hexun.com/gsxw/ Accept-Encoding: gzip, deflate Accept-Language: zh-CN,zh;q=0.9,en;q=0.8"""
將字符串轉(zhuǎn)為字典
split(sep=None, maxsplit=None)
headers = dict([line.split(": ",1) for line in raw_headers.split("\n")])
輸出測試
print(headers)
"""
{
'Accept-Language': ' zh-CN,zh;q=0.9,en;q=0.8',
'Accept-Encoding': ' gzip, deflate',
'Accept': ' */*',
'User-Agent': ' Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.84 Safari/537.36',
'Host': ' open.tool.hexun.com',
'Referer': ' http://stock.hexun.com/gsxw/',
'Pragma': ' no-cache',
'Cache-Control': ' no-cache'
}
"""
封裝為函數(shù)
def get_headers(header_raw):
"""
通過原生請求頭獲取請求頭字典
:param header_raw: {str} 瀏覽器請求頭
:return: {dict} headers
"""
return dict(line.split(": ", 1) for line in header_raw.split("\n"))
def get_cookies(cookie_raw):
"""
通過原生cookie獲取cookie字段
:param cookie_raw: {str} 瀏覽器原始cookie
:return: {dict} cookies
"""
return dict(line.split("=", 1) for line in cookie_raw.split("; "))
以上這篇Python爬蟲:將headers請求頭字符串轉(zhuǎn)為字典的方法就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關(guān)文章
logging日志模塊是python的一個內(nèi)置模塊，該模塊定義了一些函數(shù)和類，為上層應(yīng)用程序或庫實現(xiàn)了一個強大而又靈活的日志記錄系統(tǒng)，這篇文章主要介紹了Python如何在日志中隱藏明文密碼?,需要的朋友可以參考下2023-10-10
Python實現(xiàn)微信自動回復(fù)信息的功能(根據(jù)不同信息回復(fù)對應(yīng)的信息)
這篇文章主要介紹了Python實現(xiàn)微信自動回復(fù)信息的功能(根據(jù)不同信息回復(fù)對應(yīng)的信息),我們使用的第三方包是UIAutomation,結(jié)合示例代碼給大家介紹的非常詳細(xì),需要的朋友可以參考下2023-09-09
這篇文章主要為大家詳細(xì)介紹了pygame游戲之旅，教大家如何創(chuàng)建游戲窗口界面，具有一定的參考價值，感興趣的小伙伴們可以參考一下2018-11-11
Python 實現(xiàn)的 Google 批量翻譯功能
這篇文章主要介紹了Python 實現(xiàn)的 Google 批量翻譯功能，非常不錯，具有一定的參考借鑒價值,需要的朋友可以參考下2019-08-08
這篇文章主要介紹了深入理解NumPy簡明教程（二、數(shù)組1）,NumPy數(shù)組是一個多維數(shù)組對象,具有一定的參考價值，感興趣的小伙伴們可以參考一下。2016-12-12
這篇文章主要介紹了詳細(xì)介紹Python進(jìn)度條tqdm的使用，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07
python+tkinter+mysql做簡單數(shù)據(jù)庫查詢界面
本文主要介紹了python+tkinter+mysql做簡單數(shù)據(jù)庫查詢界面，文中通過示例代碼介紹的非常詳細(xì)，具有一定的參考價值，感興趣的小伙伴們可以參考一下2022-01-01
Python3.4學(xué)習(xí)筆記之列表、數(shù)組操作示例
這篇文章主要介紹了Python3.4列表、數(shù)組操作,結(jié)合實例形式分析了Python3.4列表的創(chuàng)建、元素追加、刪除、排序等相關(guān)操作技巧,需要的朋友可以參考下2019-03-03
這篇文章主要介紹了?Python?tkinter庫圖形繪制例子，文章基于Python的相關(guān)資料展開主題，分享繪圖小例子，需要的小伙伴可以參考一下2022-04-04
Python實現(xiàn)批量獲取文件夾內(nèi)文件名并重命名
這篇文章主要為大家詳細(xì)介紹了Python如何批量獲取文件夾內(nèi)文件名及重命名文件,文中的示例代碼講解詳細(xì),感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下2025-02-02