哈岁NB 发表于 2023-5-29 16:51:17

爬虫

请问这个爬虫为什么爬不到源代码呢
import requests

url = 'https://www.baidu.com/s?rtt=1&bsst=1&cl=2&tn=news&rsv_dl=ns_pc&word=%E9%98%BF%E9%87%8C%E5%B7%B4%E5%B7%B4'
header = {
   "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36"
}
response = requests.get(url=url,headers=header)
response.encoding = 'utf-8'

print(response.text)

isdkz 发表于 2023-5-29 17:25:24

应该是你爬太多次了,触发了安全验证,

可以等会再爬,或者换个网络,要不你就在浏览器上面打开这个网址手动安全验证之后再执行代码试试

哈岁NB 发表于 2023-5-29 17:38:37

isdkz 发表于 2023-5-29 17:25
应该是你爬太多次了,触发了安全验证,

可以等会再爬,或者换个网络,要不你就在浏览器上面打开这个网址 ...

好的,感谢感谢
页: [1]
查看完整版本: 爬虫