scrapy 出错 spider not found dmoz

上帝赐殊恩

按照教程中的步骤，dmoz_spider.py的文件路径在tutorial/tutorial/spiders下面，没有错。但是总是出出现上图中的错误，请问怎么解决？

谢谢！！！

上帝赐殊恩

在线等！！

小甲鱼

请确保 name 属性的名字正确：

1. import scrapy
   
2. 
   
3. from tutorial.items import DmozItem
   
4. 
   
5. class DmozSpider(scrapy.Spider):
   
6.     name = "dmoz"
   
7.     allowed_domains = ["dmoz.org"]
   
8.     start_urls = [
   
9.         "http://www.dmoz.org/Computers/Programming/Languages/Python/Books/",
   
10.         "http://www.dmoz.org/Computers/Programming/Languages/Python/Resources/"
    
11.     ]
    
12. 
    
13.     def parse(self, response):
    
14.         sel = scrapy.selector.Selector(response)
    
15.         sites = sel.xpath('//ul[@class="directory-url"]/li')
    
16.         items = []
    
17.         for site in sites:
    
18.             item = DmozItem()
    
19.             item['title'] = site.xpath('a/text()').extract()
    
20.             item['link'] = site.xpath('a/@href').extract()
    
21.             item['desc'] = site.xpath('text()').extract()
    
22.             items.append(item)
    
23. 
    
24.         return items
    

复制代码

上帝赐殊恩

name也是正确的，直接用的例子中的代码

上帝赐殊恩

小甲鱼 发表于 2015-10-12 20:22
请确保 name 属性的名字正确：

name也是正确的，没错。怎么办？

Mr.Young

我也遇到了同样的问题，楼主解决了吗？

daxinzangwind

我也一样的，楼主解决了吗？

daxinzangwind

解决了吗

Intel_Chip

我也遇到同样的问题，看来是一个共性问题哦

aluominhai

解决了吗？好久了貌似..求答案

MaxWelll_

求大拿回答啊。。我也一样，LZ是不是python3

笑梦灵

我也是一样的问题。。。。

爱喝水的黑熊

求解决，我也是遇到了同样的问题，而且我写别的spider运行，也是发生这个问题。。。完全瘫痪了。。。。

zjzjxx

cd tutorial 之后先 scrapy genspider dmoz dmoz.org, 然后再scrapy crawl dmoz，我这样是能运行出来的，小伙伴们可以试试

邻家老王

要转到spiders目录下运行

ttentau

zjzjxx 发表于 2017-2-24 11:32
cd tutorial 之后先 scrapy genspider dmoz dmoz.org, 然后再scrapy crawl dmoz，我这样是能运行出来的，小 ...

好了。666

ice_280

Traceback (most recent call last):
  File "/usr/local/bin/scrapy", line 7, in <module>
    from scrapy.cmdline import execute
  File "/usr/local/lib/python3.5/dist-packages/scrapy/cmdline.py", line 9, in <module>
    from scrapy.crawler import CrawlerProcess
  File "/usr/local/lib/python3.5/dist-packages/scrapy/crawler.py", line 7, in <module>
    from twisted.internet import reactor, defer
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/reactor.py", line 38, in <module>
    from twisted.internet import default
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/default.py", line 56, in <module>
    install = _getInstallFunction(platform)
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/default.py", line 44, in _getInstallFunction
    from twisted.internet.epollreactor import install
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/epollreactor.py", line 24, in <module>
    from twisted.internet import posixbase
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/posixbase.py", line 18, in <module>
    from twisted.internet import error, udp, tcp
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/tcp.py", line 28, in <module>
    from twisted.internet._newtls import (
  File "/usr/local/lib/python3.5/dist-packages/twisted/internet/_newtls.py", line 21, in <module>
    from twisted.protocols.tls import TLSMemoryBIOFactory, TLSMemoryBIOProtocol
  File "/usr/local/lib/python3.5/dist-packages/twisted/protocols/tls.py", line 41, in <module>
    from OpenSSL.SSL import Error, ZeroReturnError, WantReadError
  File "/usr/local/lib/python3.5/dist-packages/OpenSSL/__init__.py", line 8, in <module>
    from OpenSSL import rand, crypto, SSL
  File "/usr/local/lib/python3.5/dist-packages/OpenSSL/SSL.py", line 113, in <module>
    if _lib.Cryptography_HAS_SSL_ST:
AttributeError: module 'lib' has no attribute 'Cryptography_HAS_SSL_ST'

这是什么情况。。。

肖fish

domz网站不是已经停止服务了吗。。。

Kong-Fei

zjzjxx 发表于 2017-2-24 11:32
**** 作者被禁止或删除 内容自动屏蔽 ****

太强了