[已解决]Python：自己写的一个爬虫，有一个地方出错了，但是找不到原因

py大神

1. 
   
2. #!/usr/bin/env python
   
3. # -*- coding:utf-8 -*-
   
4. 
   
5. import urllib.request
   
6. import re
   
7. 
   
8. #这里处理小说的URL
   
9. def spid(url,headers):
   
10.     req = urllib.request.Request(url,headers=headers)
    
11.     response = urllib.request.urlopen(req)
    
12.     html = response.read().decode("gbk")
    
13. 
    
14.     return html
    
15. #这里下面三行添加URL头部，
    
16. url = "http://www.31xs.org/12/12970/"
    
17. headers = {"这里是headers信息"}
    
18. info = spid(url,headers)
    
19. 
    
20. #匹配目录（把每一章的URL匹配出来）
    
21. re_Cata_Str = r'<dd><a href="/12/12970/.*"'
    
22. re_Cata_Obj = re.compile(re_Cata_Str)
    
23. re_Cata_Res = re_Cata_Obj.findall(info)
    
24. 
    
25. #添加URL（把每一章的URL都添加进一个列表）
    
26. url_List = []
    
27. url_Num = 0
    
28. for i in re_Cata_Res:
    
29.     all_url =url + re_Cata_Res[url_Num][23:35]
    
30.     url_List.append(all_url)
    
31.     url_Num += 1
    
32. 
    
33. #发起请求（根据每一章的URL发出请求）
    
34. text_List = []
    
35. for i in url_List:
    
36.     req = urllib.request.Request(i,headers=headers)
    
37.     response = urllib.request.urlopen(req)
    
38.     texthtml = response.read().decode("gbk")
    
39.     #匹配正文（把正文匹配出来，并添加进一个列表）
    
40.     re_Text_Str = r'<p>.*?</p>'
    
41.     re_Text_Obj = re.compile(re_Text_Str)
    
42.     re_Text_Res = re_Text_Obj.findall(texthtml)
    
43.     text_List.append(re_Text_Res)
    
44. 
    
45. #写入文件
    
46. text_Num = 0
    
47. text_Num2 = 9#因为前九章是最近更新，所以这里从第一张开始
    
48. with open(r"C:\Users\(__ini__)\Desktop\剑来正文.txt",'w') as f:
    
49.     for i in text_List[text_Num2:]:#这里把每一章给i
    
50.         text_Num2 += 1
    
51.         for e in i[text_Num]:#这里把每一章的第一段给e
    
52.             print(i[0],i[1],e)#按道理说这里的i[0]元素和e打印出来的结果应该是相等的，但是打印出来发现e却是i[0][0]。这是问什么？
    
53.             break
    
54.             f.write(e)
    
55.             text_Num += 1
    
56.         break
    
57.             
    
58. 
    

复制代码

这是一个爬取我看的一个小说的爬虫，具体功能是根据目录爬取每一章的正文并且写入文件。问题在第52行。

最佳答案

月排行榜 / 总排行榜

BngThea

2018-1-18 21:22:45

因为for循环中的i[text_Num]就是i[0]

跳转到最佳答案楼层

BngThea

因为for循环中的i[text_Num]就是i[0]

py大神

BngThea 发表于 2018-1-18 21:22
因为for循环中的i[text_Num]就是i[0]

还真是，快被自己蠢哭了

感谢老哥！