Beautifulsoup的使用，筛选主播名字

chelseanash

请教一下，怎么用Beautifulsoup把主播的名字筛选出来啊

°蓝鲤歌蓝

1. soup = BeautifulSoup(response.text, 'html.parser')

复制代码

1. name = soup.select('.s_anchor_infor span')[0].text

复制代码

应该是这样子，没有实际去爬取过。
你可以去看看小甲鱼的 BeautifulSoup 文档 http://bbs.fishc.com/thread-97807-1-1.html

chelseanash

°蓝鲤歌蓝 发表于 2018-2-12 22:28
应该是这样子，没有实际去爬取过。
你可以去看看小甲鱼的 BeautifulSoup 文档 http://bbs.fishc.com ...

我看他爬豆瓣的例子用的find_all()，能用find_all()吗？
另外用的你代码报错list index out of range，能怎么修改一下。
初学小白，大大有时间帮忙看下啦，谢谢

新手·ing

1. soup =BeautifulSoup(response,'html.parser')
   
2. for link in soup.find_all('dd',class_='s_anchor_infor'):
   
3. print(link.text)

复制代码

新手·ing

缩进自己调下。

chelseanash

新手·ing 发表于 2018-2-13 07:47
缩进自己调下。

import requests
import bs4

url = 'http://www.xiaohulu.com/anchor2/'
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/61.0.3163.100 Safari/537.36'}
res = requests.get(url,headers = headers)
soup = bs4.BeautifulSoup(res.text,'html.parser')
for link in soup.find_all("dd",class_="s_anchor_infor"):
    print(link.text)
为什么我最后出来的结果是空的啊，什么也打印不出来

°蓝鲤歌蓝

chelseanash 发表于 2018-2-13 15:55
import requests
import bs4

你下载的这个网站源码里面根本就没有这些信息，只是你从审查元素可以看得到而已,
这些都是js动态加载的出来的。

°蓝鲤歌蓝

还是加密的，呵呵。