鱼C论坛

 找回密码
 立即注册
查看: 1445|回复: 1

pyspider的代码运行不了

[复制链接]
发表于 2020-7-21 11:15:52 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
有大佬能来看一下嘛
pyspider框架下的
是用来爬取P站图片的 为什么运行不了

from pyspider.libs.base_handler import *
import os

class Handler(BaseHandler):
    crawl_config = {
    }

    @every(minutes=24 * 60)
    def on_start(self):
        self.crawl('https://www.pixiv.net/', callback=self.index_page)

    @config(age=10 * 24 * 60 * 60)
    def index_page(self, response):
        for each in response.doc("div.rp5asc-0 bscYTy a").items():
            self.crawl(each.attr.href, callback=self.detail_page)

    @config(priority=2)
    def detail_page(self, response):
        for each in response.doc("rp5asc-10 leQnFG").items():
            self.crawl(each.attr.src, callback=self.detail_page2)
       
    
    @config(priority=2)
    def detail_page(self, response):
        f=open(os.path.join("D:\\图",response.url[-10:]),'wb')
        f.write(response.content)
        f.close()
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2020-7-22 18:46:13 | 显示全部楼层
求救求救
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-19 20:38

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表