[已解决]scrapy 调用的问题

jtxs0000

我想直接F5运行，方便测试我有没有拿到数据，这个东西我搞了好久都不会
半路上车的，类这一块我懵懵懂懂的，有没有大佬教一下我这要怎么调用

代码如下：

1. import scrapy
   
2. 
   
3. class HuyaSpider(scrapy.Spider):
   
4.     name = 'huya'
   
5.     # allowed_domains = ['www.xxx.com']
   
6.     start_urls = ['https://www.huya.com/']
   
7.     start_urls = ['https://www.huya.com/cache.php?m=LiveList&do=getLiveListByPage&gameId=1663&tagAll=0&page=1']
   
8. 
   
9. def parse(self, response):
   
10. 
    
11.         html = response.json()
    
12.         # data = []
    
13.         for each in html['data']['datas']:
    
14.             title = each["roomName"]
    
15.             name = each['nick']
    
16.             nums = each['totalCount']
    
17. 
    
18.             print(each["roomName"])
    
19. 
    
20. if __name__ == "__main__":
    
21.       # 这里我要怎么写才可以直接右键运行
    

复制代码

最佳答案

月排行榜 / 总排行榜

kylin121380

2020-9-17 16:28:55

在项目下新建个文件

1. from scrapy import cmdline
   
2. 
   
3. 
   
4. cmdline.execute(['scrapy', 'crawl', '爬虫名'])

复制代码

运行这个文件就行

跳转到最佳答案楼层

kylin121380

在项目下新建个文件

1. from scrapy import cmdline
   
2. 
   
3. 
   
4. cmdline.execute(['scrapy', 'crawl', '爬虫名'])

复制代码

运行这个文件就行

jtxs0000

占个楼，def 那里少了个缩进，手抖了一下

jtxs0000

kylin121380 发表于 2020-9-17 16:28
在项目下新建个文件

运行这个文件就行

没办法在当前文件下运行吗？感觉换过来换过去好麻烦

kylin121380

jtxs0000 发表于 2020-9-17 16:34
没办法在当前文件下运行吗？感觉换过来换过去好麻烦

那不行