鱼C论坛

 找回密码
 立即注册
查看: 2468|回复: 2

python爬虫

[复制链接]
发表于 2017-7-31 10:48:05 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
求助:如何用python爬虫爬取一个链接里面的链接里的内容?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2017-7-31 11:42:48 | 显示全部楼层
进入链接,正则匹配出链接中的链接后进行访问查询相关内容
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-7-31 17:28:24 | 显示全部楼层
方法很多,一般的字符串find匹配,正则表达式,beautifulsoup等的。你想得到的是一个网页链接里内容中的还有的网页链接,再次进行爬取吧?
一样的啊,先打开那个网页,然后用你喜欢的方法匹配出外层链接里内层的链接,然后再次urlopen打开,再次进行处理就可以的,只要外层链接和内层链接都可以正常访问是没问题的。(建议你可以定义个函数,然后递归操作应该很简单)
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-2-24 00:49

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表