[已解决]scrapy框架的问题，刚学，不太懂还麻烦大佬看下

哈哈可克 · 发表于 2019-8-28 20:22:13

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

# -*- coding: utf-8 -*-
import scrapy
import re
from musicSpider.items import MusicspiderItem    #这里引入时MusicspiderItem下面油条红色波浪线，但是要是输入from MusicspiderItem.musicSpider.items import MusicspiderItem虽然都显示正常了，但是在执行scrapy crawl muSpider -o mu.json生成json文件时提示No module named 'musicSpider.musicSpider

class MuspiderSpider(scrapy.Spider):
name = 'muSpider'
allowed_domains = ['http://www.htqyy.com']
start_urls = ['http://www.htqyy.com/top/musicList/hot?pageIndex=0&pageSize=20']

def parse(self, response):
      data = response.body.decode()

      items = []
      titles = re.findall(r'target="play" title="(.*?)"', data)  # 获取所有歌曲名
      artist = re.findall(r'<a href="/artist/\\d+" title="(.*?)" target="_blank">', data)  # 获取所有艺术家名
      for i in range(0, len(titles)):
         item = MusicspiderItem()
         item['titles'] = titles[i]
         item['artist'] = artist[i]

         items.append(item)

      return items

最佳答案

月排行榜 / 总排行榜

空青

2019-8-29 09:07:30

你的文件夹应该类似这种结构吧

开始的文件夹样式