詳解python selenium 爬取網(wǎng)易云音樂歌單名
目標網(wǎng)站:

首先獲取第一頁的數(shù)據(jù),這里關(guān)鍵要切換到iframe里

打印一下

獲取剩下的頁數(shù),這里在點擊下一頁之前需要設置一個延遲,不然會報錯。

結(jié)果:

一共37頁,爬取完畢后關(guān)閉瀏覽器
完整代碼:
url = 'https://music.163.com/#/discover/playlist/'
from selenium import webdriver
import time
# 創(chuàng)建瀏覽器對象
window = webdriver.Chrome('./chromedriver')
window.get(url)
time.sleep(1)
# 切換到iframe窗口
iframe = window.find_element_by_id('g_iframe')
window.switch_to.frame(iframe)
music_list = window.find_elements_by_xpath('//ul[@class="m-cvrlst f-cb"]/li')
for music_element in music_list:
print(music_element.text)
print()
print('*'*20)
page = 1
# 開始提取
while True:
time.sleep(2)
# 獲取下一頁
next = window.find_element_by_link_text('下一頁')
if not next.get_attribute('class') == 'zbtn znxt js-disabled':
next.click()
else:
break
time.sleep(1)
# 提取數(shù)據(jù)
music_list = window.find_elements_by_xpath('//ul[@class="m-cvrlst f-cb"]/li')
for music_element in music_list:
print(music_element.text)
print()
print(page,'*'*20)
page+=1
# 退出瀏覽器
window.quit()
以上所述是小編給大家介紹的python selenium爬取網(wǎng)易云音樂歌單名詳解整合,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
- python爬蟲之利用Selenium+Requests爬取拉勾網(wǎng)
- python selenium實現(xiàn)智聯(lián)招聘數(shù)據(jù)爬取
- python基于selenium爬取斗魚彈幕
- Spring Boot延遲執(zhí)行實現(xiàn)方法
- Python selenium爬取微信公眾號文章代碼詳解
- 基于python requests selenium爬取excel vba過程解析
- Python進階之使用selenium爬取淘寶商品信息功能示例
- Python使用Selenium+BeautifulSoup爬取淘寶搜索頁
- python爬蟲系列Selenium定向爬取虎撲籃球圖片詳解
- python學習之panda數(shù)據(jù)分析核心支持庫
- Python數(shù)據(jù)分析之彩票的歷史數(shù)據(jù)
- python數(shù)據(jù)分析之員工個人信息可視化
- python數(shù)據(jù)分析之公交IC卡刷卡分析
- python數(shù)據(jù)分析之用sklearn預測糖尿病
- Python數(shù)據(jù)分析之pandas函數(shù)詳解
- Python數(shù)據(jù)分析之Python和Selenium爬取BOSS直聘崗位
相關(guān)文章
Django事務transaction的使用以及多個裝飾器問題
這篇文章主要介紹了Django事務transaction的使用以及多個裝飾器問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-08-08
python將txt文檔每行內(nèi)容循環(huán)插入數(shù)據(jù)庫的方法
今天小編就為大家分享一篇python將txt文檔每行內(nèi)容循環(huán)插入數(shù)據(jù)庫的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12
windows下python虛擬環(huán)境virtualenv安裝和使用詳解
這篇文章主要介紹了windows下python虛擬環(huán)境virtualenv安裝和使用詳解,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-07-07
Python使用pysmb庫訪問Windows共享文件夾的詳細教程
本教程旨在幫助您使用pysmb庫,通過SMB(Server Message Block)協(xié)議,輕松連接到Windows共享文件夾,并列舉其中的文件與文件夾,此外,我們還將簡要介紹如何下載和上傳文件,以及如何處理可能遇到的連接錯誤,需要的朋友可以參考下2024-12-12
Python調(diào)用Windows API函數(shù)編寫錄音機和音樂播放器功能
這篇文章主要介紹了Python調(diào)用Windows API函數(shù)編寫錄音機和音樂播放器功能,本文通過實例代碼給大家介紹的非常詳細,具有一定的參考借鑒價值,需要的朋友可以參考下2020-01-01
使用python實現(xiàn)一個簡單ping?pong服務器
這篇文章主要為大家介紹了使用python實現(xiàn)一個簡單ping?pong服務器,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-04-04
Anaconda2下實現(xiàn)Python2.7和Python3.5的共存方法
今天小編就為大家分享一篇Anaconda2下實現(xiàn)Python2.7和Python3.5的共存方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-06-06

