[已解决]爬取网易云音乐

无枝为檄

为什么xpath解析出来的是空列表？

1. from selenium import webdriver
   
2. from lxml import etree
   
3. import os
   
4. 
   
5. bro = webdriver.Chrome(executable_path="./chromedriver.exe")
   
6. if not os.path.exists("./wangyi list music"):
   
7.     os.mkdir("./wangyi list music")
   
8. url = "https://music.163.com/m/playlist?id=6731975194"
   
9. bro.get(url)
   
10. page_text = bro.page_source
    
11. tree = etree.HTML(page_text)
    
12. tr_list = tree.xpath('//*[@id="auto-id-TEZk3fbkwpQOcPlD"]/table//tr')
    
13. for tr in tr_list:
    
14.     try:
    
15.         name = tr.xpath("./td[2]//span/a/b/@title")
    
16.         id_ = tr.xpath("./td[2]//span/a/@href")
    
17.         base_url = "http://music.163.com/song/media/outer/url?id=%s.mp3" % id_
    
18.         content = req.get(url=base_url,headers=headers).content
    
19.         with open("./wangyi list music/"+name+".mp3",'wb') as fp:
    
20.             fp.write(content)
    
21.             print(name+".mp3下载完成！")
    
22.     except FileNotFoundError or OSError:
    
23.         print(name+"因出错没有下载")
    
24. 
    

复制代码

最佳答案

月排行榜 / 总排行榜

南归

2021-6-19 15:35:33

<iframe frameborder="0" id="auto-id-QVz7Ahov6EnUTTiV" style="display: none;" src="https://mail.163.com/app/cloudmusic/proxy.html" __idm_frm__="29"></iframe>


要先切进iframe里

跳转到最佳答案楼层

南归

<iframe frameborder="0" id="auto-id-QVz7Ahov6EnUTTiV" style="display: none;" src="https://mail.163.com/app/cloudmusic/proxy.html" __idm_frm__="29"></iframe>


要先切进iframe里

无枝为檄

南归 发表于 2021-6-19 15:35
要先切进iframe里

切进iframe是这样吗：
bro.switch_to.frame('g_iframe')

南归

'g_iframe' 可能要根据情况变化,分析网页吧

无枝为檄

南归 发表于 2021-6-19 15:58
'g_iframe' 可能要根据情况变化,分析网页吧

终于可以了 谢谢