鱼C论坛

 找回密码
 立即注册
查看: 1484|回复: 4

爬虫得到的网站源码和F12显示不一致

[复制链接]
发表于 2020-6-22 09:59:18 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
代码
url="https://m.manhua123.net/comic/22899/1086341.html?p=1";
headers={"User-Agent": "Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36"}
try:
        # response=urllib.request.urlopen(request)
        # html = response.read()
        # html = html.decode('utf-8')
        res = requests.get(url = url,headers = headers)
        time.sleep(10)
        res.encoding = 'utf-8'
        print(res.text)

读取的网站源码
</div>
<img src="/static/images/mh_loading.gif" id="comic_pic" onClick="nextpage();" width="100%" alt="GRAND BLUE 碧蓝之海(51)" />
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2020-6-22 17:29:22 | 显示全部楼层
本帖最后由 suchocolate 于 2020-6-22 17:42 编辑

这个网站的图片url放在js里了。
import requests
import re

url = 'https://m.manhua123.net/comic/22899/1086341.html?p=1'
headers = {'user-agent': 'firefox'}
r = requests.get(url, headers=headers)
pics_list = eval(re.findall(r'z_img=\'\[(.*?)\]', r.text)[0])
print(pics_list)

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 1 反对 0

使用道具 举报

 楼主| 发表于 2020-6-23 15:24:20 | 显示全部楼层
suchocolate 发表于 2020-6-22 17:29
这个网站的图片url放在js里了。

感谢老哥,我试试
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2020-6-23 16:28:55 | 显示全部楼层
suchocolate 发表于 2020-6-22 17:29
这个网站的图片url放在js里了。

可以,感谢感谢,终于能看想看的漫画了
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2020-6-24 19:08:55 | 显示全部楼层
lpfight 发表于 2020-6-23 16:28
可以,感谢感谢,终于能看想看的漫画了

可以了就结贴吧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-20 12:12

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表