按照书上的爬虫代码敲,却没有出现结果
按照零基础入门python的爬虫代码敲,程序运行没报错,却没有出现结果,代码如下:import requests
res = requests.get("https://movie.douban.com/top250")
print(res.text)
import bs4
soup = bs4.BeautifulSoup(res.text,"html.parser")
targets = soup.find_all("div",class_="hd")
for each in targets:
print(each.a.spon.text)
图片如下:
现在豆瓣不加点反爬都爬不出来,还有你有一个打错了,
对你的代码修改如下:
import requests
res = requests.get("https://movie.douban.com/top250", headers={'User-Agent': 'Mozilla/5.0'}) # 加了 User-Agent 反爬
print(res.text)
import bs4
soup = bs4.BeautifulSoup(res.text,"html.parser")
targets = soup.find_all("div",class_="hd")
for each in targets:
print(each.a.span.text) # 这里是 span ,不是 spon
页:
[1]