鱼C论坛

 找回密码
 立即注册
查看: 2553|回复: 5

[已解决]scrapy

[复制链接]
发表于 2023-2-12 16:38:24 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
import pymysql

class XiaoshuospiderPipeline:
    conn = None#mysql的链接对象
    cursor = None

    def open_spider(self,spider):
        #数据库初始
        self.conn = pymysql.Connect(
            host='127.0.0.1',
            port=3306,
            user='root',
            password='123456a',
            db= '爬虫',
            charset='utf8'
        )
        #创建游标
        self.cursor = self.conn.cursor()

    # 爬虫文件每向管道提交一个item,则process_item方法就会被调用一次
    def process_item(self, item, spider):
        title = item['title']
        sql = 'insert into xiaoshuo (title) values ("%s")'%title
        #执行sql语句
        self.cursor.execute(sql)
        #提交事务
        self.conn.commit()
        print('成功写入一条数据')
        return item
    def close_spdier(self,spider):
        self.cursor.close()
        self.conn.close()
导入pymysql没有问题,为什么一运行就报错 No module named 'pymysql'
最佳答案
2023-2-12 16:41:33
可能用的不是同一个python环境

本帖被以下淘专辑推荐:

  • · scrapy|主题: 4, 订阅: 0
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2023-2-12 16:41:33 | 显示全部楼层    本楼为最佳答案   
可能用的不是同一个python环境
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2023-2-12 16:45:06 | 显示全部楼层
isdkz 发表于 2023-2-12 16:41
可能用的不是同一个python环境

请问一下该怎么改一下环境呢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2023-2-12 16:46:30 | 显示全部楼层
isdkz 发表于 2023-2-12 16:41
可能用的不是同一个python环境

好了好了,成功了,在scrapy下又安装了一次pymysql
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2023-2-12 16:46:44 | 显示全部楼层
isdkz 发表于 2023-2-12 16:41
可能用的不是同一个python环境

感谢感谢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2023-2-12 16:50:24 | 显示全部楼层
本帖最后由 isdkz 于 2023-2-12 21:59 编辑
哈岁NB 发表于 2023-2-12 16:45
请问一下该怎么改一下环境呢


你用的是 pychram 吧,pychram 每一个项目都是新开一个虚拟环境,你要在 pychram 安装这个包,

或者在 pychram 的项目设置那里切换 python 解释器
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-11-22 20:41

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表