鱼C论坛

 找回密码
 立即注册

扫一扫,访问微社区

查看: 287|回复: 6

求助大神!!爬虫某宝,遇到几个问题,详情看帖子

[复制链接]
最佳答案
0 
发表于 2019-10-5 17:15:28 | 显示全部楼层 |阅读模式
26鱼币
需求1:爬取淘宝数据必须正常爬取不会反爬虫被封了或者账号,ip被封等等,避免被查封
需求2:现在淘宝去搜索关键词会让用户去登陆,怎么正常登陆爬取(能不登陆更好)
需求3:使用的是 requests 去爬取
需求4:爬取过的商品不能重复(一个商品不能爬重复了),每页都要爬到,保存为excel表格(店名,地址,产品全名,销量,价格)
记得代码别卡死了
帮帮忙大神们
献上你们的代码

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2019-10-8 08:50:12 | 显示全部楼层
暂时只会爬mm图片
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
60 
发表于 2019-10-8 09:03:14 | 显示全部楼层
本帖最后由 yjsx86 于 2019-10-8 09:05 编辑

定制爬虫起步价500rmb, 看难易程度再决定价格
不是你鱼币能解决的

如果你只是某个点不会, 兴许会有人帮你
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
35 
发表于 2019-10-8 09:46:24 | 显示全部楼层
用selenium吧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2019-10-8 12:05:35 | 显示全部楼层
必须得得登陆,登陆可以省很多事,操作频繁了会出滑块.而且这里面的技术有点小贵哦
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2019-10-8 15:25:12 | 显示全部楼层
空手套代码?????
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
最佳答案
0 
发表于 2019-10-10 13:47:15 | 显示全部楼层

空手套代码
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐上一条 /1 下一条

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号

GMT+8, 2019-10-19 07:13

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表