鱼C论坛

 找回密码
 立即注册
查看: 2872|回复: 5

爬虫”系统繁忙,请稍后再试“,怎么破

[复制链接]
发表于 2021-7-25 15:16:14 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
爬虫”系统繁忙,请稍后再试“,怎么破?
真费脑啊,全网都没有答案,跪求各位大神一解

import requests
import json
url="http://www.winshangdata.com/wsapi/project/list3_4"
data1={"pageNum":"1","orderBy":"1","pageSize":"60","zsxq_yt1":"","zsxq_yt2":"","qy_p":"301","qy_c":"","qy_a":"","xmzt":"","key":"","wuyelx":"","isHaveLink":"","ifdporyt":""}
headers={"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.107 Safari/537.36"}
data=requests.post(url,data=data1,headers=headers)
data.text
eff4a8c620c63879ba1c11124500142.png
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-7-25 16:23:30 | 显示全部楼层
被限制了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-7-25 17:03:55 | 显示全部楼层
触发反爬了叭
要么控制爬取速度,要么使用IP代理
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-7-25 17:52:19 | 显示全部楼层
有可能header里的refer没写
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-7-26 20:44:27 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2021-7-27 09:28:59 | 显示全部楼层
触发网站的发爬措施,试着将网站request请求中的参数都带进去。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-26 10:16

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表