[已解决]soup.find_all()

def花 · 发表于 2020-8-24 19:59:28

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

import urllib.request
from bs4 import BeautifulSoup

url = 'https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%C3%C0%C5%AE&fr=ala&ala=1&alatpl=cover&pos=0&hs=2&xthttps=111111'
response = urllib.request.urlopen(url)
html = response.read().decode('utf-8')
soup = BeautifulSoup(html,'lxml')

print(soup.body.div.div.div.div.div.ul)
print(soup.find_all(name=''))

怎么都获取不到想要的，怎么才能得到它（下面图片蓝色部分）

>>> soup.find_all(attrs={'class':'imgitem'})
[]
>>> soup.find_all(class_='imgitem')
[]
>>>

最佳答案

月排行榜 / 总排行榜

1q23w31

2020-8-24 20:34:55

本帖最后由 1q23w31 于 2020-8-24 20:48 编辑

def花发表于 2020-8-24 20:10
可是还是找不出来

用浏览器访问你的网址，关闭js后网页自动跳转到百度图片
2020-8-24 20-33-42.png

跳转到最佳答案楼层

qiuyouzhi · 发表于 2020-8-24 20:00:17

本帖最后由 qiuyouzhi 于 2020-8-24 20:01 编辑

https://www.cnblogs.com/cymwill/articles/7574479.html

liuzhengyuan · 发表于 2020-8-24 20:10:36

qiuyouzhi 发表于 2020-8-24 20:00
https://www.cnblogs.com/cymwill/articles/7574479.html

你最佳突破 1000 了

def花 · 发表于 2020-8-24 20:10:45

qiuyouzhi 发表于 2020-8-24 20:00
https://www.cnblogs.com/cymwill/articles/7574479.html

>>> soup.find_all(lambda tag:tag.has_attr('class') and tag.has_attr('data-objurl'))
[]

可是还是找不出来

1q23w31 · 发表于 2020-8-24 20:32:09

def花发表于 2020-8-24 20:10
可是还是找不出来

网页涉及js，建议用webdriver抓取

1q23w31 · 发表于 2020-8-24 20:34:55

这个最佳答案由 1q23w31 给出，感谢 1q23w31 的回答。

单击隐藏图章

本帖最后由 1q23w31 于 2020-8-24 20:48 编辑

def花发表于 2020-8-24 20:10
可是还是找不出来

用浏览器访问你的网址，关闭js后网页自动跳转到百度图片
2020-8-24 20-33-42.png

def花 · 发表于 2020-8-25 07:58:41

1q23w31 发表于 2020-8-24 20:34
用浏览器访问你的网址，关闭js后网页自动跳转到百度图片

怎么关闭它？

1q23w31 · 发表于 2020-8-25 08:10:14

def花发表于 2020-8-25 07:58
怎么关闭它？

浏览器设置里找找可以禁用js 或者找个有这个功能的插件

账号		自动登录	找回密码
密码			立即注册