[已解决]初学爬虫遇到的简单问题

密发小和尚

1. from bs4 import BeautifulSoup
   
2. import requests
   
3. 
   
4. url = 'http://www.ivsky.com/tupian/xiaomai_t3811/'
   
5. r = requests.get(url)
   
6. soup = BeautifulSoup(r.text,'lxml')
   
7. imgs = soup.select('body > div:nth-of-type(3) > div.left > ul')
   
8. for img in zip(imgs):
   
9.     data ={img.get('src')}
   
10. print(data)
    

复制代码

出现错误：AttributeError: 'tuple' object has no attribute 'get'
大神们能说说我的问题出在哪里吗？
我是在https://www.bilibili.com/video/av14109284/index_3.html?t=964上学的，跟15：38的代码相似，为什么我的会出错？

最佳答案

月排行榜 / 总排行榜

坏小子

2017-12-3 21:09:57

密发小和尚 发表于 2017-12-2 19:23
是imgs吧，得到的是{None}，是爬取失败还是什么的？

啊不好意思，确实是imgs

我把完整的能提取链接的代码贴出来吧

1. # -*- coding: utf-8 -*-
   
2. from bs4 import BeautifulSoup
   
3. import requests
   
4. 
   
5. url = 'http://www.ivsky.com/tupian/xiaomai_t3811/'
   
6. r = requests.get(url)
   
7. soup = BeautifulSoup(r.text,'lxml')
   
8. #这是楼主的提取方法
   
9. imgs = soup.select('body > div:nth-of-type(3) > div.left > ul')
   
10. l=[]
    
11. for img in imgs:
    
12.     l.append(img.attrs)
    
13.     data ={img.attrs.get('src')}
    
14. print(data)
    
15. print(l)
    
16. 
    
17. #这是我的提取方法
    
18. l=soup.find_all(name='img')
    
19. for x in l:
    
20.     print(unicode(x))
    
21. imgs=l
    
22. data=[]
    
23. for img in imgs:
    
24.     data.append(img.attrs.get('src'))
    
25. print(data)

复制代码

跳转到最佳答案楼层

坏小子

把zip(imgs)改成img

密发小和尚

坏小子 发表于 2017-12-2 18:44
把zip(imgs)改成img

是imgs吧，得到的是{None}，是爬取失败还是什么的？

坏小子

密发小和尚 发表于 2017-12-2 19:23
是imgs吧，得到的是{None}，是爬取失败还是什么的？

啊不好意思，确实是imgs

我把完整的能提取链接的代码贴出来吧

1. # -*- coding: utf-8 -*-
   
2. from bs4 import BeautifulSoup
   
3. import requests
   
4. 
   
5. url = 'http://www.ivsky.com/tupian/xiaomai_t3811/'
   
6. r = requests.get(url)
   
7. soup = BeautifulSoup(r.text,'lxml')
   
8. #这是楼主的提取方法
   
9. imgs = soup.select('body > div:nth-of-type(3) > div.left > ul')
   
10. l=[]
    
11. for img in imgs:
    
12.     l.append(img.attrs)
    
13.     data ={img.attrs.get('src')}
    
14. print(data)
    
15. print(l)
    
16. 
    
17. #这是我的提取方法
    
18. l=soup.find_all(name='img')
    
19. for x in l:
    
20.     print(unicode(x))
    
21. imgs=l
    
22. data=[]
    
23. for img in imgs:
    
24.     data.append(img.attrs.get('src'))
    
25. print(data)

复制代码