[已解决]selenium框架爬取虎牙主播的粉丝信息

塔利班

from selenium import webdriver

browser=webdriver.Chrome()
browser.get('https://www.huya.com/mswztv')
num=browser.find_element_by_css_selector('#activityCount')
print(num.text)

塔利班

十六是只仙 发表于 2018-11-29 14:02
请问activityCount在哪里找的

橘黄色订阅，不是粉丝数么

塔利班

from selenium import webdriver
from bs4 import BeautifulSoup
browser=webdriver.Chrome()
browser.get('https://www.huya.com/mswztv')
soup=BeautifulSoup(browser.page_source,'lxml')
for each in soup.find(id="J_weekRankList").find_all('li'):
    try:
        print(each.text)
    except:
        pass
有的等级信息在tag里，自己提取下

塔利班

十六是只仙 发表于 2018-11-29 15:12
有错啊

你没有lxml库么，不行换个
'lxml'换成'html.parser'

塔利班

我的IDLE和PYCHARM都行

塔利班

你得设置pycharm运行关联控制台

塔利班

保存文件可以，你也可以尝试写入数据库
from selenium import webdriver
from bs4 import BeautifulSoup
browser=webdriver.Chrome()
browser.get('https://www.huya.com/mswztv')
soup=BeautifulSoup(browser.page_source,'lxml')
for each in soup.find(id="J_weekRankList").find_all('li'):
    try:
        each = each.select("span[class='week-rank-name J_name']")
        print(each[0].text)
    except:
        pass

塔利班

十六是只仙 发表于 2018-11-29 17:28
您好，我还有一个问题，就是
当我第一次访问get到数据是正常的
但是第二次在进行，就得不到 li 了

没遇到