[已解决]爬虫的问题

wzdyjn

https://book.yunzhan365.com/book ... ?from=singlemessage

这个电子书怎么 ，，哪位大神研究下，，，我始终获得不了地址，，非常感谢

最佳答案

月排行榜 / 总排行榜

yjsx86

2020-2-21 21:11:16

1. 1. 这个地址获得书本信息https://book.yunzhan365.com/bookcase/gcei/js/bookConfig.js， 得到以下信息
   
2. {'id': 1141212, 'title': '测控设计语文(人教一年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/olhn/', 'pages': 62, 'newTime': '2020-02-14 10:05:26', 'label': 0, 'bStatus': 1, 'bLink': 'olhn', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
3. {'id': 1141208, 'title': '测控设计语文(人教二年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/jwat/', 'pages': 59, 'newTime': '2020-02-14 10:02:57', 'label': 0, 'bStatus': 1, 'bLink': 'jwat', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
4. {'id': 1141218, 'title': '测控设计语文(人教三年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/xzlq/', 'pages': 56, 'newTime': '2020-02-14 10:06:18', 'label': 0, 'bStatus': 1, 'bLink': 'xzlq', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
5. 等等等
   
6. 2.提取上面信息中的url， 比如 http://book.yunzhan365.com/ncagf/olhn/ 拼接图片下载地址，https://book.yunzhan365.com/ncagf/olhn/files/mobile/??.jpg (注：下载地址会自动301到https所以提前把http改为https)， 这里的??为上面信息的pages， 即62， 循环1~62下载即可

复制代码

跳转到最佳答案楼层

zltzlt

无法获得地址，因为点击一本电子书后变量没变。

dlnb526

点击打开书籍之后的index.html的Request URL就是每本书的地址。
比如三年级下
https://book.yunzhan365.com/ncagf/xzlq/mobile/index.html
一年级下
https://book.yunzhan365.com/ncagf/olhn/mobile/index.html
希望对你有所帮助

wzdyjn

是的就是 的  研究了好久，，没有结果，所以想让大家看下，，哪位大神看下

wzdyjn

加密加的真好

dlnb526

wzdyjn 发表于 2020-2-21 20:16
加密加的真好

没有加密啊，就是用的adobe的flash的html显示插件…

yjsx86

1. 1. 这个地址获得书本信息https://book.yunzhan365.com/bookcase/gcei/js/bookConfig.js， 得到以下信息
   
2. {'id': 1141212, 'title': '测控设计语文(人教一年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/olhn/', 'pages': 62, 'newTime': '2020-02-14 10:05:26', 'label': 0, 'bStatus': 1, 'bLink': 'olhn', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
3. {'id': 1141208, 'title': '测控设计语文(人教二年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/jwat/', 'pages': 59, 'newTime': '2020-02-14 10:02:57', 'label': 0, 'bStatus': 1, 'bLink': 'jwat', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
4. {'id': 1141218, 'title': '测控设计语文(人教三年级下)', 'description': '', 'url': 'http://book.yunzhan365.com/ncagf/xzlq/', 'pages': 56, 'newTime': '2020-02-14 10:06:18', 'label': 0, 'bStatus': 1, 'bLink': 'xzlq', 'isPublic': 1, 'sysText': 1, 'auditStatus': 1, 'categoryid': 430707, 'categoryname': '默认', 'isDownload': ''}
   
5. 等等等
   
6. 2.提取上面信息中的url， 比如 http://book.yunzhan365.com/ncagf/olhn/ 拼接图片下载地址，https://book.yunzhan365.com/ncagf/olhn/files/mobile/??.jpg (注：下载地址会自动301到https所以提前把http改为https)， 这里的??为上面信息的pages， 即62， 循环1~62下载即可

复制代码

wzdyjn

yjsx86 发表于 2020-2-21 21:11

你太厉害了，，，，拼接的地址你 是怎么找到的     ？？？？？

yjsx86

wzdyjn 发表于 2020-2-21 21:37
你太厉害了，，，，拼接的地址你 是怎么找到的     ？？？？？

这个算是简单的爬虫分析， 因为这个地址是固定， 直接在浏览器f12控制台里能看到