[已解决]scrapy爬虫问题

夜掣

参照小甲鱼老师的python基础教学 scrapy入门初窥 其中有一段代码

1. import scrapy
   
2. from tutorial.items import DmozItem

复制代码

前面基本上是按照教程里面一步一步来的，在shell中获取的结果也是正常的
在视频结尾修改 spider文件里面的上述内容后 会提示 没有tutorai这个模块
l

最佳答案

月排行榜 / 总排行榜

wongyusing

2018-12-16 19:32:01

应该是你的项目名打错了。  
正常是可以导入的。  
但是确保导入item文件的父级目录要打对

跳转到最佳答案楼层

幽梦三影

不推荐小甲鱼的scrapy教程，只讲了最基本的用法，推荐一下这个老师讲的 https://fishc.com.cn/thread-121574-1-1.html

wongyusing

应该是你的项目名打错了。  
正常是可以导入的。  
但是确保导入item文件的父级目录要打对

夜掣

幽梦三影 发表于 2018-12-16 19:24
不推荐小甲鱼的scrapy教程，只讲了最基本的用法，推荐一下这个老师讲的 https://fishc.com.cn/thread-12157 ...

多谢分享 我打算先把小甲鱼的看完 然后看你的这个进行一下补充  后面打算看老男孩的，先初步接触一下，写代码这玩意还得是多写才能提高水平

夜掣

wongyusing 发表于 2018-12-16 19:32
应该是你的项目名打错了。  
正常是可以导入的。  
但是确保导入item文件的父级目录要打对

奇怪了  吃了顿饭 回去仔细看了一下 跟视频里面的还是一模一样 ，只不过我是爬的别的网站，后来跑到cmd下运行了一下 结果显示又正常了！

superchen

论文很好

夜掣

superchen 发表于 2018-12-16 21:45
论文很好

什么论文

fan1993423

幽梦三影 发表于 2018-12-16 19:24
不推荐小甲鱼的scrapy教程，只讲了最基本的用法，推荐一下这个老师讲的 https://fishc.com.cn/thread-12157 ...

我问个问题，scrapy爬虫爬取视频如何保持本地，我知道保存图片有个ImagePipelines类，通过改写get_media_request这个函数可以实现，然后在setttings里IMAGES_STORE设置路径就可以了，但是我也参照这个,用了MediaPipelines，也改写了get_media_request，但是并没有保存到本地，改怎么弄？