Python讀取網(wǎng)頁(yè)內(nèi)容的方法

更新時(shí)間：2015年07月30日 16:57:50 作者：寫代碼沒錢途

這篇文章主要介紹了Python讀取網(wǎng)頁(yè)內(nèi)容的方法,實(shí)例分析了Python基于URL讀取網(wǎng)頁(yè)內(nèi)容的相關(guān)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下

本文實(shí)例講述了Python讀取網(wǎng)頁(yè)內(nèi)容的方法。分享給大家供大家參考。具體如下：

import urllib2
#encoding = utf-8
class Crawler:
  def main(self):
    #req = urllib2.Request('http://www.baidu.com/')
    #req.add_header('User-Agent', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:5.0)')
    #urllib2.socket.setdefaulttimeout(10) # 超時(shí)10秒
    #page = urllib2.urlopen(req)
    page = urllib2.urlopen('http://www.google.com', timeout=10)
    data = page.read()
    print data
    print len(data) #計(jì)算字節(jié)長(zhǎng)度
if __name__ == '__main__':
  me=Crawler()
  me.main()

希望本文所述對(duì)大家的Python程序設(shè)計(jì)有所幫助。

您可能感興趣的文章:

相關(guān)文章

Python全棧之字符串和列表相關(guān)操作
這篇文章主要為大家介紹了Python字符串和列表相關(guān)操作，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下，希望能夠給你帶來(lái)幫助
2021-12-12
Django ORM 查詢管理器源碼解析
這篇文章主要介紹了Django ORM 查詢管理器源碼解析,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
2019-08-08
python安裝以及IDE的配置教程
Python在Linux、windows、Mac os等操作系統(tǒng)下都有相應(yīng)的版本，不管在什么操作系統(tǒng)下，它都能夠正常工作。除非使用平臺(tái)相關(guān)功能，或特定平臺(tái)的程序庫(kù)，否則可以跨平臺(tái)使用。今天我們主要來(lái)探討下windows系統(tǒng)下的安裝與配置
2015-04-04
如何利用python正確地為圖像添加高斯噪聲
這篇文章主要給大家介紹了關(guān)于如何利用python正確地為圖像添加高斯噪聲的相關(guān)資料,需要的朋友可以參考下
2022-03-03
python根據(jù)字典的鍵來(lái)刪除元素的方法
在本篇文章里小編給大家整理的是一篇關(guān)于python根據(jù)字典的鍵來(lái)刪除元素的方法，有興趣的朋友們可以參考下。
2020-08-08
Python中自然語(yǔ)言處理和文本挖掘的常規(guī)操作詳解
自然語(yǔ)言處理和文本挖掘是數(shù)據(jù)科學(xué)中的重要領(lǐng)域,涉及對(duì)文本數(shù)據(jù)的分析和處理,這篇文章為大家介紹了一些常見的任務(wù)和實(shí)現(xiàn)方法,需要的可以了解下
2025-02-02
Python中實(shí)現(xiàn)一行拆多行和多行并一行的示例代碼
這篇文章主要介紹了Python中實(shí)現(xiàn)一行拆多行和多行并一行的示例代碼，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
2020-09-09
拿來(lái)就用！Python批量合并PDF的示例代碼
這篇文章主要介紹了Python批量合并PDF的示例代碼，幫助大家更好的理解和學(xué)習(xí)Python，感興趣的朋友可以了解下
2020-08-08
Django 中的Timezone 處理操作
這篇文章主要介紹了Django 中的Timezone 處理操作，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來(lái)看看吧
2021-04-04
python?中的?return?解析
這篇文章主要介紹了python?中的?return?解析，return?語(yǔ)句用于退出函數(shù)，向調(diào)用方返回一個(gè)表達(dá)式。執(zhí)行到?return?語(yǔ)句時(shí)，會(huì)退出函數(shù)，return?之后的語(yǔ)句不再執(zhí)，下文下邊就利用舉例給大家講解該內(nèi)容得相關(guān)資料，需要的小伙伴可以參考一下
2022-02-02