[已解决]网页标签提取

Twilight6

1. url = 'https://www.baidu.com'
   
2. headers = {
   
3.         'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36'
   
4.     }
   
5. 
   
6. request = Request(url,headers=headers)
   
7. response = urlopen(request)
   
8. html = response.read().decode()
   
9. 
   

复制代码

最基本的伪装 ————设置 headers 参数

Twilight6

小甲鱼爬虫课程建议看完下~，甲鱼哥说的比我更好理解的~

---

如果帮助到你了~就给个最佳答案吧~