[已解决]关于爬虫404的问题

AtticusWang

输入一段代码得到这种结果：

1. urllib.error.HTTPError: HTTP Error 404: Not Found

复制代码

去搜了一下，看到有个网友的评论：

一个比较狡猾的做法是，网站将返回的代码从200替换成404，其他不变。不影响浏览器显示，但是却会干扰爬虫。

我去，这里有两个问题：

第一，如何替换？
第二，感觉替换了之后就无解了呀，怎么都爬不到的，这样还能爬吗？

最佳答案

月排行榜 / 总排行榜

wongyusing

2018-11-28 20:32:10

把网址和代码发出来，你这样子很难回答你的问题

跳转到最佳答案楼层

wongyusing

把网址和代码发出来，你这样子很难回答你的问题

AtticusWang

wongyusing 发表于 2018-11-28 20:32
把网址和代码发出来，你这样子很难回答你的问题

这个问题确实问得不够妥当，代码忘了保存，下次留意，哈哈，这次就算了，谢谢