[Python]新手爬虫问题

Pythonnewers

1. rom bs4 import BeautifulSoup
   
2. import requests
   
3. 
   
4. url='https://jingyan.baidu.com/article/cbf0e500ad03222eaa2893a1.html'
   
5. A=requests.get(url)
   
6. soup=BeautifulSoup(A.text,'lxml')
   
7. lit=soup.find('ol',{'class':"exp-conent-orderlist"})
   
8. l=lit.find_all_next('li')
   
9. v=[]
   
10. for i in l:
    
11.     v = i.find('div',{'class':"content-list-text"}).strip()
    
12. 
    
13.     print(v)

复制代码

这段代码最后一段v = i.find('div',{'class':"content-list-text"}).strip()..如果我在.strip之前加一个get_text()的话会报错一下

1.   File "F:/Python自制软件/爬虫1号！.py", line 11, in <module>
   
2.     v = i.find('div',{'class':"content-list-text"}).get_text().strip()
   
3. AttributeError: 'NoneType' object has no attribute 'get_text'
   

复制代码

但是内容可以显示
但是如果去掉(我上面展示的代码)的话

1. Traceback (most recent call last):
   
2.   File "F:/Python自制软件/爬虫1号！.py", line 11, in <module>
   
3.     v = i.find('div',{'class':"content-list-text"}).strip()
   
4. TypeError: 'NoneType' object is not callable

复制代码

直接错误了，根本没有爬取...

wp231957

再遍历L之前，你可以输出一下，我猜是空