如何爬取虾米，酷我音乐的评论

fan1993423

按照小甲鱼老师的方法可以爬取网易云音乐的评论，但是同样的方法我在酷我音乐，虾米音乐上面确找不到，无论是request.get(网站).text还是通过让降低加载速度去看ntework里面的数据都没有看到评论，各位鱼油有什么办法爬取这些评论吗？明明这些评论就在网站最下方，就是找不到。有热心的鱼油可以粘贴一下代码
http://www.kuwo.cn/yinyue/5899379?catalog=yueku2016这个是酷我音乐的一首歌，下面有评论

chakyam

有啊

1. http://comment.kuwo.cn/com.s?type=get_rec_comment&uid=0&prod=newWeb&digest=15&sid=5899379&page=1&rows=10&f=web&gid=0bafaceb-b25b-47cb-b390-aee5204434af&jpcallback=getRecCommentListFn&_=1524126366508

复制代码

fan1993423

chakyam 发表于 2018-4-19 16:28
有啊

哦，我找到了，按下停止键后一个一个找到的，网易云音乐可以下拉，这个放到一排的，不往右拉还找不到

fan1993423

这是爬取评论

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. import re
   
4. 
   
5. html=requests.get('http://comment.kuwo.cn/com.s?type=get_rec_comment&uid=0&prod=newWeb&digest=15&sid=5899379&page=1&'
   
6.                   'rows=10&f=web&gid=46fff5dd-5782-4eed-bc64-ddc5ed74d485&jpcallback=getRecCommentListFn&_=15241'
   
7.                   '27007154').text
   
8. html=re.search(r'try(.+)',html).group(1)
   
9. html=re.search(r'{var jsondata=(.+)',html).group(1)
   
10. name=html['rows']
    
11. with open('text3.txt','w',encoding='utf-8') as f:
    
12.     for each in name:
    
13.         f.write([each['msg']])
    
14. 
    
15. 
    
16. 
    
17. 
    
18. 
    
19. 
    

复制代码

但是会爆TypeError: string indices must be integers这个错误，这个好像是get型json数据，请问各位鱼油大佬，这个评论该怎么提取

fan1993423

chakyam 发表于 2018-4-19 16:28
有啊

这个json数据该怎么提取，我4楼了粘贴了我的代码，但是报错了

fan1993423

自顶