鱼C论坛

 找回密码
 立即注册
查看: 2551|回复: 6

[已解决]才学爬虫的,遇到了点问题,求助各位大神

[复制链接]
发表于 2017-5-23 03:44:36 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 silence181 于 2017-5-23 03:49 编辑

我练习爬不得姐的图片,详细见下图1
1.jpg 图1

写的爬虫代码,下图2
2.jpg 图2
红色框里面的上部分
  1. find.all('div',{'class':'j-r-list-c-img'})
复制代码
我感觉没问题,能爬到图3里面的那些信息,但是下面的pic.get('data-original')就有问题了  打印一下 就是图3里面None
3.jpg 图3
试了大半天都不行,求哪位大神给我讲解一下谢谢
最佳答案
2017-5-23 13:38:20
你要的图片链接又不在你找到的那个div标签中,当然找不到
图片链接在它下面的img标签中
改成这样
  1. i_pic = pic.find_all("img")[0].get("data-original")
复制代码
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2017-5-23 03:46:08 | 显示全部楼层
所有的 import 都没有问题
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-5-23 10:06:39 | 显示全部楼层
有人么 @小甲鱼  @各位大神
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-5-23 13:38:20 | 显示全部楼层    本楼为最佳答案   
你要的图片链接又不在你找到的那个div标签中,当然找不到
图片链接在它下面的img标签中
改成这样
  1. i_pic = pic.find_all("img")[0].get("data-original")
复制代码
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-5-23 13:43:14 | 显示全部楼层
还有一种改法是改第一句
  1. for pic in soup_s.select(".j-r-list-c-img > a > img"):
复制代码

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2017-5-23 15:56:48 | 显示全部楼层
你看看是不是  生成的  建议用phantomjs  这样可以很好的解决一些js问题
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2017-5-25 15:14:04 | 显示全部楼层
gopythoner 发表于 2017-5-23 13:38
你要的图片链接又不在你找到的那个div标签中,当然找不到
图片链接在它下面的img标签中
改成这样

原来如此,谢谢
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-5-17 13:51

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表