tianyamingyue 发表于 2020-5-4 17:39:12

遇到有反扒机制的网站,python就没辙了吗?

看了论坛里的爬虫几乎都是爬妹子图网站的,难道就是因为她的反扒能力弱吗?遇到反扒能力强的我们就没辙了吗?我刚想在头条图片上练练手就碰了一鼻子灰!做了users-agent隐藏也没用,python没有更好的办法吗?

老八秘制 发表于 2020-5-4 18:38:02

那还要去学习更nb的库……建议requests或者美丽汤

liuzhengyuan 发表于 2020-5-4 18:52:08

小甲鱼老师的 《极客 python 之效率革命》有讲到爬虫的,你可以去了解一下……那里有更高级的库……美丽汤{:10_277:}

杜若左 发表于 2020-5-4 19:47:05

selenium了解一下
页: [1]
查看完整版本: 遇到有反扒机制的网站,python就没辙了吗?