鱼C论坛

 找回密码
 立即注册
查看: 1186|回复: 6

想爬一个网站的数据,没思路...求助

[复制链接]
发表于 2020-6-10 11:53:05 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
http://ggzy.ah.gov.cn/login.do?method=beginlogin

一开始我想通过XPATH找信息,返回的response.text打开发现是 一堆JS....



然后我想直接通过post请求,发现请求体是payload,于是我查了网上资料
payload = {
    "callCount":1,
    "page": "/bulletininfo.do?method=showList&fileType=2&hySort=&bulletinclass=jy&num=1&bulletinType=01",
    "httpSessionId":"bd33a04f36df7a5e6615df863c83",
    "scriptSessionId": "24819EBA1C927DC31DDCA82698484FF0348",
    "c0-scriptName":"bulletinInfoDWR",
    "c0-methodName":"getPackListForDwr1",
    'c0-id':0,
    'c0-e1':'string:2',
    'c0-e2':'string:',
    'c0-e3':'string:jy',
    'c0-e4':'string:2',
    'c0-e5':'string:02',
    'c0-e6':'string:',
    'c0-e7':'string:',
    'c0-e8':'number:1',
    'c0-e9':'string:10',
    'c0-e10':'string:true',
    'c0-e11':'string:packTable',
    'c0-param0':'Object_Object:{id: reference: c0-e1, hySort: reference:c0-e2, bulletinclass: reference:c0-e3, fileType: reference:c0-e4, bulletinType: reference:c0-e5, district: reference:c0-e6, srcdistrict: reference:c0-e7, currentPage: reference:c0-e8, pageSize: reference:c0-e9, isPage: reference:c0-e10, tabId: reference:c0-e11}',
    'batchId':2
}

posturl = "http://ggzy.ah.gov.cn/dwr/call/plaincall/bulletinInfoDWR.getPackListForDwr1.dwr"

payloadHeader = {
'Host': 'ggzy.ah.gov.cn',
'Content-Type': 'text/plain'
}

r = requests.post(posturl, data=json.dumps(payload), headers=payloadHeader)
print(r.text)

返回:
throw 'allowScriptTagRemoting is false.';
//#DWR-REPLY
if (window.dwr) dwr.engine._remoteHandleBatchException({ name:'org.directwebremoting.extend.ServerException', message:'The specified call count is not a number' });
else if (window.parent.dwr) window.parent.dwr.engine._remoteHandleBatchException({ name:'org.directwebremoting.extend.ServerException', message:'The specified call count is not a number' });

有没有大神来试一下的。。。到底要怎么爬
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-6-10 12:07:26 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-6-10 12:20:43 | 显示全部楼层
啊这,你和政0府有仇马
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-6-10 12:37:53 | 显示全部楼层
老八秘制 发表于 2020-6-10 12:20
啊这,你和政0府有仇马

我可是良民
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-6-10 15:18:29 | 显示全部楼层
后缀gov的网站小心点爬哦
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 1 反对 0

使用道具 举报

发表于 2020-6-10 18:01:35 | 显示全部楼层
后缀gov的网站是政0府哟,小心点(建议不要爬了)
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-6-10 18:15:51 | 显示全部楼层
你想爬这个网站的什么数据?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-20 16:31

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表