[已解决]scrapy中设置IP池能否实现定时更新？

wufan

调皮的小屌 发表于 2016-12-26 19:40
可以在用这个代理IP的时候 先验证一下呢？

是的  需要提前验证ip是否可用，我现在纠结的是怎么加入刷新机制，如果写在settings里面的话，要如何在开始爬取后可以刷新IP池，实现IP代理的实时性。。。看了好多大神的代码  感觉自己是不是已经不适合这行了

vividlolo

大佬学会了吗，请问怎么验证啊