[已解决]使用openpyxl 怎么把第二页的数据保存下来

jtxs0000

RT
内容已经拿到手了,测试第一页的时候很正常
但开始弄翻页的的时候,第二页的数据会把第一页的覆盖
求各位大神帮帮,第一时间给最佳

1. #应该就是这部分代码缺少什么
   
2. wb = openpyxl.Workbook()
   
3.     wb.guess_types = True
   
4.     ws = wb.active
   
5. 
   
6.     ws.append(['投诉编号','投诉品牌','投诉车系','投诉车型','问题简述','投诉时间','投诉状态'])
   
7. 
   
8. 
   
9.     for each in datalist:
   
10.         print(each)
    
11.         ws.append(each)
    
12.         time.sleep(0.5)
    
13. 
    
14.     wb.save("车辆问题.xlsx")

复制代码

最佳答案

月排行榜 / 总排行榜

suchocolate

2020-8-13 13:36:35

jtxs0000 发表于 2020-8-13 11:58
我想放在一起,到时候好做数据分析

帮你写了一个

1. 
   
2. import requests
   
3. import parsel
   
4. #from lxml import etree
   
5. from openpyxl import load_workbook
   
6. import time
   
7. 
   
8. 
   
9. def main():
   
10.     wb = load_workbook('test.xlsx')
    
11.     wb.guess_types = True
    
12.     ws = wb.active
    
13.     ws.append(['投诉编号', '投诉品牌', '投诉车系', '投诉车型', '问题简述', '投诉时间', '投诉状态'])
    
14.     headers = {'User-Agent': 'firefox'}
    
15.     for page in range(1, 10):
    
16.         target = f"http://www.12365auto.com/zlts/273-0-0-0-0-0_0-0-0-0-0-0-0-{page}.shtml"
    
17.         print(target)
    
18.         r = requests.get(target, headers=headers)
    
19.         #html = etree.HTML(r.text)
    
20.         html = parsel.Selector(r.text)
    
21.         # 搜索编号
    
22.         num = html.xpath('//tr/td[1]/text()')
    
23.         # 公司名称
    
24.         name = html.xpath('//tr/td[2]/text()')
    
25.         # 车辆品牌
    
26.         serial = html.xpath('//tr/td[3]/text()')
    
27.         # 车辆款式
    
28.         type = html.xpath('//tr/td[4]/text()')
    
29.         # 问题信息
    
30.         description = html.xpath('//tr/td/a/text()')
    
31.         # 投诉时间
    
32.         stime = html.xpath('//tr/td[7]/text()')
    
33.         # 投诉状态
    
34.         status = html.xpath('//tr/td/em/text()')
    
35.         offset = ws.max_row + 1
    
36.         for n, v in enumerate(num):
    
37.             row = str(n + offset)
    
38.             ws['a' + row] = num[n]
    
39.             ws['b' + row] = name[n]
    
40.             ws['c' + row] = serial[n]
    
41.             ws['d' + row] = type[n]
    
42.             ws['e' + row] = description[n]
    
43.             ws['f' + row] = stime[n]
    
44.             ws['g' + row] = status[n]
    
45.     wb.save("test.xlsx")
    
46. 
    
47. 
    
48. if __name__ == '__main__':
    
49.     main()
    

复制代码

跳转到最佳答案楼层

永恒的蓝色梦想

麻烦发个完整代码

jtxs0000

1. import requests
   
2. import parsel
   
3. import openpyxl
   
4. import time
   
5. 
   
6. headers = {
   
7.     'User-Agent': 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3760.400 QQBrowser/10.5.4083.400',
   
8.     'Referer': 'https://image.baidu.com/'
   
9. }
   
10. 
    
11. for page in range(1,10):
    
12.     target = f"http://www.12365auto.com/zlts/273-0-0-0-0-0_0-0-0-0-0-0-0-{page}.shtml"
    
13.     print(target)  
    
14. 
    
15.     response = requests.get(target,headers=headers).text
    
16.     html = parsel.Selector(response)
    
17.     # 搜索编号
    
18.     num = html.xpath('//tr/td[1]/text()').getall()
    
19. 
    
20.     # 公司名称
    
21.     name = html.xpath('//tr/td[2]/text()').getall()
    
22. 
    
23.     # 车辆品牌
    
24.     car = html.xpath('//tr/td[3]/text()').getall()
    
25. 
    
26.     # 车辆款式
    
27.     cars = html.xpath('//tr/td[4]/text()').getall()
    
28. 
    
29.     # 问题信息
    
30.     carinfo = html.xpath('//tr/td/a/text()').getall()
    
31. 
    
32.     # 投诉时间
    
33.     timer = html.xpath('//tr/td[7]/text()').getall()
    
34. 
    
35.     # 投诉状态
    
36.     infos = html.xpath('//tr/td/em/text()').getall()
    
37.     datalist = []
    
38. 
    
39.     for i in range(len(num)):   
    
40.         #创建一个新列表接受
    
41.         data = []   
    
42.         data.append(num[i])
    
43.         
    
44.         data.append(name[i])
    
45.         
    
46.         data.append(car[i])
    
47.         
    
48.         data.append(cars[i])
    
49. 
    
50.         data.append(carinfo[i])
    
51. 
    
52.         data.append(timer[i])
    
53. 
    
54.         data.append(infos[i])
    
55. 
    
56.         
    
57. 
    
58. 
    
59. 
    
60.         #再次添加进一个列表
    
61.         datalist.append(data)
    
62.    
    
63.         
    
64.      
    
65.     wb = openpyxl.Workbook()
    
66.     wb.guess_types = True
    
67.     ws = wb.active
    
68. 
    
69.     ws.append(['投诉编号','投诉品牌','投诉车系','投诉车型','问题简述','投诉时间','投诉状态'])
    
70. 
    
71. 
    
72.     for each in datalist:
    
73.         print(each)
    
74.         ws.append(each)
    
75.         time.sleep(0.5)
    
76. 
    
77.     wb.save("车辆问题.xlsx")

复制代码

jtxs0000

永恒的蓝色梦想 发表于 2020-8-13 10:48
麻烦发个完整代码

1. import requests
   
2. import parsel
   
3. import openpyxl
   
4. import time
   
5. 
   
6. headers = {
   
7.     'User-Agent': 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3760.400 QQBrowser/10.5.4083.400',
   
8.     'Referer': 'https://image.baidu.com/'
   
9. }
   
10. 
    
11. for page in range(1,10):
    
12.     target = f"http://www.12365auto.com/zlts/273-0-0-0-0-0_0-0-0-0-0-0-0-{page}.shtml"
    
13.     print(target)  
    
14. 
    
15.     response = requests.get(target,headers=headers).text
    
16.     html = parsel.Selector(response)
    
17.     # 搜索编号
    
18.     num = html.xpath('//tr/td[1]/text()').getall()
    
19. 
    
20.     # 公司名称
    
21.     name = html.xpath('//tr/td[2]/text()').getall()
    
22. 
    
23.     # 车辆品牌
    
24.     car = html.xpath('//tr/td[3]/text()').getall()
    
25. 
    
26.     # 车辆款式
    
27.     cars = html.xpath('//tr/td[4]/text()').getall()
    
28. 
    
29.     # 问题信息
    
30.     carinfo = html.xpath('//tr/td/a/text()').getall()
    
31. 
    
32.     # 投诉时间
    
33.     timer = html.xpath('//tr/td[7]/text()').getall()
    
34. 
    
35.     # 投诉状态
    
36.     infos = html.xpath('//tr/td/em/text()').getall()
    
37.     datalist = []
    
38. 
    
39.     for i in range(len(num)):   
    
40.         #创建一个新列表接受
    
41.         data = []   
    
42.         data.append(num[i])
    
43.         
    
44.         data.append(name[i])
    
45.         
    
46.         data.append(car[i])
    
47.         
    
48.         data.append(cars[i])
    
49. 
    
50.         data.append(carinfo[i])
    
51. 
    
52.         data.append(timer[i])
    
53. 
    
54.         data.append(infos[i])
    
55. 
    
56.         
    
57. 
    
58. 
    
59. 
    
60.         #再次添加进一个列表
    
61.         datalist.append(data)
    
62.    
    
63.         
    
64.      
    
65.     wb = openpyxl.Workbook()
    
66.     wb.guess_types = True
    
67.     ws = wb.active
    
68. 
    
69.     ws.append(['投诉编号','投诉品牌','投诉车系','投诉车型','问题简述','投诉时间','投诉状态'])
    
70. 
    
71. 
    
72.     for each in datalist:
    
73.         print(each)
    
74.         ws.append(each)
    
75.         time.sleep(0.5)
    
76. 
    
77.     wb.save("车辆问题.xlsx")

复制代码

jtxs0000

永恒的蓝色梦想 发表于 2020-8-13 10:48
麻烦发个完整代码

回复需要审核

jtxs0000

1. import requests
   
2. import parsel
   
3. import openpyxl
   
4. import time
   
5. 
   
6. headers = {
   
7.     'User-Agent': 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3760.400 QQBrowser/10.5.4083.400',
   
8.     'Referer': 'https://image.baidu.com/'
   
9. }
   
10. 
    
11. for page in range(1,10):
    
12.     target = f"http://www.12365auto.com/zlts/273-0-0-0-0-0_0-0-0-0-0-0-0-{page}.shtml"
    
13.     print(target)  
    
14. 
    
15.     response = requests.get(target,headers=headers).text
    
16.     html = parsel.Selector(response)
    
17.     # 搜索编号
    
18.     num = html.xpath('//tr/td[1]/text()').getall()
    
19. 
    
20.     # 公司名称
    
21.     name = html.xpath('//tr/td[2]/text()').getall()
    
22. 
    
23.     # 车辆品牌
    
24.     car = html.xpath('//tr/td[3]/text()').getall()
    
25. 
    
26.     # 车辆款式
    
27.     cars = html.xpath('//tr/td[4]/text()').getall()
    
28. 
    
29.     # 问题信息
    
30.     carinfo = html.xpath('//tr/td/a/text()').getall()
    
31. 
    
32.     # 投诉时间
    
33.     timer = html.xpath('//tr/td[7]/text()').getall()
    
34. 
    
35.     # 投诉状态
    
36.     infos = html.xpath('//tr/td/em/text()').getall()
    
37.     datalist = []
    
38. 
    
39.     for i in range(len(num)):   
    
40.         #创建一个新列表接受
    
41.         data = []   
    
42.         data.append(num[i])
    
43.         
    
44.         data.append(name[i])
    
45.         
    
46.         data.append(car[i])
    
47.         
    
48.         data.append(cars[i])
    
49. 
    
50.         data.append(carinfo[i])
    
51. 
    
52.         data.append(timer[i])
    
53. 
    
54.         data.append(infos[i])
    
55. 
    
56.         
    
57. 
    
58. 
    
59. 
    
60.         #再次添加进一个列表
    
61.         datalist.append(data)
    
62.    
    
63.         
    
64.      
    
65.     wb = openpyxl.Workbook()
    
66.     wb.guess_types = True
    
67.     ws = wb.active
    
68. 
    
69.     ws.append(['投诉编号','投诉品牌','投诉车系','投诉车型','问题简述','投诉时间','投诉状态'])
    
70. 
    
71. 
    
72.     for each in datalist:
    
73.         print(each)
    
74.         ws.append(each)
    
75.         time.sleep(0.5)
    
76. 
    
77.     wb.save("车辆问题.xlsx")

复制代码

suchocolate

切页（用一个对象）：

1. ws = wb['Sheet1']
   
2. # your code
   
3. # switch to sheet2
   
4. ws = wb['Sheet2']

复制代码

多页对象：

1. ws1 = wb['Sheet1']
   
2. ws2 = wb['Sheet2']

复制代码

jtxs0000

suchocolate 发表于 2020-8-13 11:52
切页（用一个对象）：

我想放在一起,到时候好做数据分析

suchocolate

jtxs0000 发表于 2020-8-13 11:58
我想放在一起,到时候好做数据分析

你的标题容易引起歧义，我以为你是要openpyxl操作sheet翻页。
wb = Workbook()是新建excel表格，第二次使用保存就会把之前的文件覆盖掉，你要用这个：

1. from openpyxl import load_workbook
   
2. wb = load_workbook('test.xls')

复制代码

suchocolate

jtxs0000 发表于 2020-8-13 11:58
我想放在一起,到时候好做数据分析

帮你写了一个

1. 
   
2. import requests
   
3. import parsel
   
4. #from lxml import etree
   
5. from openpyxl import load_workbook
   
6. import time
   
7. 
   
8. 
   
9. def main():
   
10.     wb = load_workbook('test.xlsx')
    
11.     wb.guess_types = True
    
12.     ws = wb.active
    
13.     ws.append(['投诉编号', '投诉品牌', '投诉车系', '投诉车型', '问题简述', '投诉时间', '投诉状态'])
    
14.     headers = {'User-Agent': 'firefox'}
    
15.     for page in range(1, 10):
    
16.         target = f"http://www.12365auto.com/zlts/273-0-0-0-0-0_0-0-0-0-0-0-0-{page}.shtml"
    
17.         print(target)
    
18.         r = requests.get(target, headers=headers)
    
19.         #html = etree.HTML(r.text)
    
20.         html = parsel.Selector(r.text)
    
21.         # 搜索编号
    
22.         num = html.xpath('//tr/td[1]/text()')
    
23.         # 公司名称
    
24.         name = html.xpath('//tr/td[2]/text()')
    
25.         # 车辆品牌
    
26.         serial = html.xpath('//tr/td[3]/text()')
    
27.         # 车辆款式
    
28.         type = html.xpath('//tr/td[4]/text()')
    
29.         # 问题信息
    
30.         description = html.xpath('//tr/td/a/text()')
    
31.         # 投诉时间
    
32.         stime = html.xpath('//tr/td[7]/text()')
    
33.         # 投诉状态
    
34.         status = html.xpath('//tr/td/em/text()')
    
35.         offset = ws.max_row + 1
    
36.         for n, v in enumerate(num):
    
37.             row = str(n + offset)
    
38.             ws['a' + row] = num[n]
    
39.             ws['b' + row] = name[n]
    
40.             ws['c' + row] = serial[n]
    
41.             ws['d' + row] = type[n]
    
42.             ws['e' + row] = description[n]
    
43.             ws['f' + row] = stime[n]
    
44.             ws['g' + row] = status[n]
    
45.     wb.save("test.xlsx")
    
46. 
    
47. 
    
48. if __name__ == '__main__':
    
49.     main()
    

复制代码

jtxs0000

suchocolate 发表于 2020-8-13 13:36
帮你写了一个

抱歉,今天有点忙,没及时上来看,等我看看代码

jtxs0000

suchocolate 发表于 2020-8-13 13:36
帮你写了一个

谢谢,设最佳了,果然是我吧数据存储这块弄错了