[已解决]豆瓣爬取250中的查找页面数看不懂，求教

我是小白89757号 · 发表于 2020-6-21 13:46:43

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

# 找出一共有多少个页面
def find_depth(res):
soup = bs4.BeautifulSoup(res.text, 'html.parser')
depth = soup.find('span', class_='next').previous_sibling.previous_sibling.text

return int(depth)

我想知道'span', class_='next'这个是怎么确定的？，确定这个页面数的目的是什么？谢谢大家！

最佳答案

月排行榜 / 总排行榜

Twilight6

2020-6-21 13:53:55

审核元素找到的：

确定页面数是为了能将所有页面都爬取下来呀

页码数知道了你也就直接可以设置爬取的次数什么的了，只要更改url 部分的字符即可

跳转到最佳答案楼层

Twilight6 · 发表于 2020-6-21 13:53:55

这个最佳答案由 Twilight6 给出，感谢 Twilight6 的回答。

单击隐藏图章

审核元素找到的：

确定页面数是为了能将所有页面都爬取下来呀

页码数知道了你也就直接可以设置爬取的次数什么的了，只要更改url 部分的字符即可

wp231957 · 发表于 2020-6-21 13:54:56

仔细翻看页面源码

lanshj · 发表于 2020-6-21 16:28:29

右键（右键你所需要的查找的内容不够）——检查——然后就能确定你需要的标签了

我是小白89757号 · 发表于 2020-6-21 16:41:16

Twilight6 发表于 2020-6-21 13:53
审核元素找到的：

谢谢！

我是小白89757号 · 发表于 2020-6-21 16:43:57

wp231957 发表于 2020-6-21 13:54
仔细翻看页面源码

谢谢！

我是小白89757号 · 发表于 2020-6-21 16:44:57

lanshj 发表于 2020-6-21 16:28
右键（右键你所需要的查找的内容不够）——检查——然后就能确定你需要的标签了

谢谢

账号		自动登录	找回密码
密码			立即注册