零基础63课视频的scrapy爬虫的代码失败了没生效，怎么解决？

学学看看 · 发表于 2018-9-4 11:17:44

提示: 作者被禁止或删除内容自动屏蔽

塔利班 · 发表于 2018-9-4 11:27:04

DMOZ网站不是没了么

编程新手nexus · 发表于 2018-9-5 11:46:07

我也遇到了类似的问题,怎么解决,换了网址也不行

wongyusing · 发表于 2018-9-5 16:30:48

网址是没问题的，只是由于一些不可描述的原因，这个网址是不存在的。
我能打开是因为我有梯子。
换个存在的网址试试，不行的话把你的spider的代码发上来看看

学学看看 · 发表于 2018-9-5 16:36:20

提示: 作者被禁止或删除内容自动屏蔽

幽梦三影 · 发表于 2018-9-6 10:40:58

wongyusing · 发表于 2018-9-6 23:41:57

本帖最后由 wongyusing 于 2018-9-6 23:43 编辑

谷歌到了，是因为你使用的是python3.7
而3.7和scrapy1.5无法兼容导致的。
github上scrapy讨论区的解决方案是

pip install git+https://github.com/lopuhin/twisted.git@9384-remove-async-param

试试吧，安装scrapy这个分支
python3.7这个兼容性问题将在scrapy1.6的时候解决

学学看看 · 发表于 2018-9-13 05:29:33

提示: 作者被禁止或删除内容自动屏蔽

账号		自动登录	找回密码
密码			立即注册

学学看看学学看看当前离线 UID 522173 日志相册贡献荣誉积分 588 狗仔卡头像被屏蔽	发表于 2018-9-4 11:17:44 \| 显示全部楼层 \|阅读模式提示: 作者被禁止或删除内容自动屏蔽
	想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
	回复使用道具举报置顶卡千斤顶显身卡

学学看看学学看看当前离线 UID 522173 日志相册贡献荣誉积分 588 狗仔卡头像被屏蔽	楼主\| 发表于 2018-9-5 16:36:20 \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
	想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
	回复支持反对使用道具举报显身卡

学学看看学学看看当前离线 UID 522173 日志相册贡献荣誉积分 588 狗仔卡头像被屏蔽	楼主\| 发表于 2018-9-13 05:29:33 From FishC Mobile \| 显示全部楼层提示: 作者被禁止或删除内容自动屏蔽
	想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
	回复支持反对使用道具举报显身卡