Python爬取微信讀書實(shí)現(xiàn)讀書免費(fèi)自由

更新時(shí)間：2021年09月27日 11:11:31 作者：朱小五是凹凸君呀

主要跟大家介紹一下，我是如何用Python爬取小說，再導(dǎo)入微信讀書的。成功實(shí)現(xiàn)在微信讀書中各種“白票”付費(fèi)小說，有需要的朋友可以借鑒參考下

前情提要

不知道用微信讀書的朋友多不多，這里順便安利一下哈。

我目前看電子書的話基本都是在用微信讀書，畢竟白嫖的無限卡真香。

在微信讀書上，不僅很多正版的Python書籍電子書可以直接看，還可以在閱讀的同時(shí)看別人寫的標(biāo)注。

但是無限卡對(duì)于小說不太友好，只能閱讀開頭的章節(jié)，后面的章節(jié)就需要變相付費(fèi)了。

雖然知道番茄小說，七貓小說這種都能免費(fèi)看，但是實(shí)在不愿意為了一部小說再多下一個(gè)軟件。

幸虧微信讀書出了一個(gè)功能——可以自己上傳書籍，支持支持txt、pdf、epub格式。

這就給了我一個(gè)想法，只需要將小說下載到本地，再導(dǎo)入到微信讀書不就成了。

下載小說方法賊簡(jiǎn)單，用Python也行，搜搜專門打包好的下載器也成。不過我記得兩年前剛學(xué)Python時(shí)自己練習(xí)寫過筆趣閣的爬蟲，這就翻出來用用。

爬取小說

原來代碼是找到了，但是很尷尬，我爬取的那個(gè)網(wǎng)站404了。

不過目前筆趣閣遍地都是，也分不清到底誰是“正版”的？

還有個(gè)比較好的消息，很多家連網(wǎng)頁模板都是一模一樣，你的爬蟲改改地址就能接著用了，這是妙啊。

于是乎，我又隨便找了一家“筆趣閣”。

今天我們就以我吃西紅柿近期完結(jié)的滄元圖為例，可以看到在這個(gè)筆趣閣網(wǎng)站里，小說滄元圖的網(wǎng)址url是

https://*********/html/2292/

同時(shí)，《滄元圖》所有的章節(jié)也都羅列在本頁面。

我覺得先爬取所有的章節(jié)名和對(duì)應(yīng)的url網(wǎng)址，分別保存到列表中。然后再使用requests爬取，并依次寫入txt文檔中。

網(wǎng)頁結(jié)構(gòu)并不復(fù)雜，也沒有反爬措施。大概20行代碼即可下載

for i, j in zip(urls, names):
    res_text = requests.get(url, headers=header).text
    zj_html = etree.HTML(res_text)
    texts = zj_html.xpath('//*[@id="content"]/text()')
    texts2 = zj_html.xpath('//*[@id="content"]/*/text()')
    text = '\n'.join(texts).strip()+'\n'.join(texts2).strip()

    with open('novels_n.txt', 'a', encoding='utf8') as f:
        f.write(f'{j} \n {text} \n')
        print(f'{novels_n}/{j}，正在下載...')