零基礎(chǔ)寫(xiě)python爬蟲(chóng)之抓取百度貼吧代碼分享
更新時(shí)間：2014年11月06日 08:52:17 投稿：hebedich
前面幾篇都是以介紹基礎(chǔ)知識(shí)為主，各位童鞋估計(jì)都在犯嘀咕了，你到底寫(xiě)不寫(xiě)爬蟲(chóng)啊？？額，好吧，本文就給大家寫(xiě)一個(gè)簡(jiǎn)單的百度貼吧的python爬蟲(chóng)代碼。
這里就不給大家廢話(huà)了，直接上代碼，代碼的解釋都在注釋里面，看不懂的也別來(lái)問(wèn)我，好好學(xué)學(xué)基礎(chǔ)知識(shí)去！
復(fù)制代碼 代碼如下:
# -*- coding: utf-8 -*-
#---------------------------------------
# 程序：百度貼吧爬蟲(chóng)
# 版本：0.1
# 作者：why
# 日期：2013-05-14
# 語(yǔ)言：Python 2.7
# 操作：輸入帶分頁(yè)的地址，去掉最后面的數(shù)字，設(shè)置一下起始頁(yè)數(shù)和終點(diǎn)頁(yè)數(shù)。
# 功能：下載對(duì)應(yīng)頁(yè)碼內(nèi)的所有頁(yè)面并存儲(chǔ)為html文件。
#---------------------------------------
import string, urllib2
#定義百度函數(shù)
def baidu_tieba(url,begin_page,end_page):
for i in range(begin_page, end_page+1):
sName = string.zfill(i,5) + '.html'#自動(dòng)填充成六位的文件名
print '正在下載第' + str(i) + '個(gè)網(wǎng)頁(yè)，并將其存儲(chǔ)為' + sName + '......'
f = open(sName,'w+')
m = urllib2.urlopen(url + str(i)).read()
f.write(m)
f.close()
#-------- 在這里輸入?yún)?shù) ------------------
# 這個(gè)是山東大學(xué)的百度貼吧中某一個(gè)帖子的地址
#bdurl = 'http://tieba.baidu.com/p/2296017831?pn='
#iPostBegin = 1
#iPostEnd = 10
bdurl = str(raw_input(u'請(qǐng)輸入貼吧的地址，去掉pn=后面的數(shù)字：\n'))
begin_page = int(raw_input(u'請(qǐng)輸入開(kāi)始的頁(yè)數(shù)：\n'))
end_page = int(raw_input(u'請(qǐng)輸入終點(diǎn)的頁(yè)數(shù)：\n'))
#-------- 在這里輸入?yún)?shù) ------------------
#調(diào)用
baidu_tieba(bdurl,begin_page,end_page)
以上就是python抓取百度貼吧的一段簡(jiǎn)單的代碼，非常的實(shí)用吧，各位可以自行擴(kuò)展下。
您可能感興趣的文章:
- Python實(shí)現(xiàn)爬取百度貼吧帖子所有樓層圖片的爬蟲(chóng)示例
- python爬蟲(chóng)教程之爬取百度貼吧并下載的示例
- 基于Python實(shí)現(xiàn)的百度貼吧網(wǎng)絡(luò)爬蟲(chóng)實(shí)例
- 零基礎(chǔ)寫(xiě)python爬蟲(chóng)之抓取百度貼吧并存儲(chǔ)到本地txt文件改進(jìn)版
- Python編寫(xiě)百度貼吧的簡(jiǎn)單爬蟲(chóng)
- Python3實(shí)現(xiàn)爬取指定百度貼吧頁(yè)面并保存頁(yè)面數(shù)據(jù)生成本地文檔的方法
- Python爬取網(wǎng)頁(yè)中的圖片（搜狗圖片）詳解
- 簡(jiǎn)單實(shí)現(xiàn)Python爬取網(wǎng)絡(luò)圖片
- Python爬蟲(chóng)爬取一個(gè)網(wǎng)頁(yè)上的圖片地址實(shí)例代碼
- 利用Python爬取微博數(shù)據(jù)生成詞云圖片實(shí)例代碼
- Python實(shí)現(xiàn)的爬取百度貼吧圖片功能完整示例
相關(guān)文章
Python+Pygame實(shí)現(xiàn)簡(jiǎn)單的單詞小游戲
語(yǔ)言是一種藝術(shù)，但是作為語(yǔ)言的基礎(chǔ)——詞匯，卻不像藝術(shù)那樣賞心悅目。不斷的記憶與復(fù)習(xí)，讓詞匯成為很多孩子在學(xué)習(xí)英語(yǔ)時(shí)，最難完全攻克的關(guān)卡。本文就來(lái)用Python制作一個(gè)簡(jiǎn)單的英語(yǔ)單詞游戲吧2023-03-03
這篇文章主要介紹了Python可視化神器pyecharts繪制柱狀圖，文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容介紹，具有一定的參考價(jià)值，需要的朋友可以參考一下2022-07-07
各種Python庫(kù)安裝包下載地址與安裝過(guò)程詳細(xì)介紹(Windows版)
這篇文章主要介紹了Windows版的各種Python庫(kù)安裝包下載地址與安裝過(guò)程詳細(xì)介紹,本文給大家提供了windows版的各種Python庫(kù)安裝包下載地址等相關(guān)知識(shí)，非常不錯(cuò)具有參考借鑒價(jià)值，需要的朋友可以參考下2016-11-11
這篇文章主要介紹了Python中的深拷貝和淺拷貝詳解,本文講解了變量-對(duì)象-引用、可變對(duì)象-不可變對(duì)象、拷貝等內(nèi)容,需要的朋友可以參考下2015-06-06
Python中的chr()函數(shù)與ord()函數(shù)解析
這篇文章主要介紹了Python中的chr()函數(shù)與ord()函數(shù)解析，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2022-05-05
解決python的空格和tab混淆而報(bào)錯(cuò)的問(wèn)題
這篇文章主要介紹了解決python的空格和tab混淆而報(bào)錯(cuò)的問(wèn)題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2021-02-02
本文將介紹如何使用pyperclip庫(kù)來(lái)進(jìn)行剪切板操作,包括復(fù)制、粘貼文本和圖片,以及清空剪切板內(nèi)容等功能,具有一定的參考價(jià)值,感興趣的 可以了解一下2024-03-03
本文主要介紹了OpenCV中的分水嶺算法、圖像金字塔對(duì)圖像進(jìn)行分割的方法。文中的示例代碼講解詳細(xì)，對(duì)我們學(xué)習(xí)OpenCV有一定的幫助，需要的可以參考一下2021-12-12
今天小編就為大家分享一篇python 變量初始化空列表的例子，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-11-11
pytorch模型部署到onnx的詳細(xì)過(guò)程
這篇文章主要介紹了如何簡(jiǎn)單的將pytorch模型部署到onnx,本文結(jié)合示例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-08-08