xlwt保存出错

Ygh6688

1. # -*- coding:utf-8 -*-
   
2. 
   
3. import requests
   
4. from lxml import etree
   
5. import re
   
6. import xlwt
   
7. 
   
8. 
   
9. datalist = []
   
10. 
    
11. 
    
12. for i in range(1,9):
    
13.     headers = {
    
14.         'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36'
    
15. 
    
16.     }
    
17.     url = 'http://sem.bjtu.edu.cn/lists-szjs.html?szyx=184&leixing=0&zhicheng=0&zimu=&k=&page=%d'
    
18.     num_url = format(url%i)
    
19.     response = requests.get(url=num_url,headers=headers)
    
20.     page_textw = response.content.decode()
    
21.     tree = etree.HTML(page_textw)
    
22.     tec = tree.xpath('/html/body/div[3]/div[2]/div[2]/ul/li')
    
23.    
    
24.     for i in tec:
    
25.       # 老师地址
    
26.       tec_url = 'http://sem.bjtu.edu.cn' + i.xpath('./div[2]/div/h6/a/@href')[0]
    
27.       # print(tec_url)
    
28.       
    
29.       tec_page = requests.get(url=tec_url,headers=headers).text
    
30.      
    
31.       # 名字
    
32.       tec_tree = etree.HTML(tec_page)
    
33.       name = tec_tree.xpath('/html/body/div[3]/div[2]/div[1]/div[2]/h6/text()')[0]
    
34.       
    
35.       datalist.append(name)
    
36.       # print(name)
    
37.       # 职位
    
38.       zhi_wei = re.findall(r'<p><span>教师职称:</span><span>(.*?)</span></p>',tec_page)
    
39.       if len(zhi_wei) == 0:
    
40.         zhi_wei = ['/']
    
41.       datalist.append(zhi_wei)
    
42.       # print(zhi_wei)
    
43.      
    
44.       # 院系
    
45.       yuan_xi = re.findall(r'<p><span>所属系 :</span><span>(.*?)</span></p>',tec_page)[0]
    
46.       if len(yuan_xi) == 0:
    
47.         yuan_xi = '/'
    
48.       datalist.append(yuan_xi)
    
49.       # print(yuan_xi)
    
50.       # 邮箱
    
51.       e_maile = re.findall(r'<p><span>邮箱:</span><span>(.*?)</span></p>',tec_page)
    
52.       if len(e_maile) == 0:
    
53.         e_maile = ['/']
    
54. 
    
55.       datalist.append(e_maile)
    
56.       # print(e_maile)
    
57. # 存储
    
58. book = xlwt.Workbook(encoding="utf-8",style_compression=0)
    
59. sheet = book.add_sheet('北京经济系老师信息.xls',cell_overwrite_ok=True)
    
60. col = ['名字','职位','院系','邮箱']
    
61. for i in range(len(col)):
    
62.     sheet.write(0,i,col[i])
    
63. for i in range(40):
    
64.    
    
65.     for j in range(0,4):
    
66.         sheet.write(i+1,datalist[j])
    
67. book.save('./教师.xls')
    
68. 
    
69. print(datalist)
    
70. print('保存成功')
    
71. print('老师共：',len(tec_url))
    

复制代码

我保存过程中老是报出：
D:\迅雷下载\python\爬虫>D:/迅雷下载/python/python.exe d:/迅雷下载/python/爬虫/练习2.py
Traceback (most recent call last):
  File "d:/迅雷下载/python/爬虫/练习2.py", line 70, in <module>
    sheet.write(i+1,datalist[j])
  File "D:\迅雷下载\python\lib\site-packages\xlwt\Worksheet.py", line 1088, in write
    self.row(r).write(c, label, style)
  File "D:\迅雷下载\python\lib\site-packages\xlwt\Row.py", line 230, in write
    self.__adjust_bound_col_idx(col)
  File "D:\迅雷下载\python\lib\site-packages\xlwt\Row.py", line 71, in __adjust_bound_col_idx
    iarg = int(arg)
ValueError: invalid literal for int() with base 10: '卜伟


求大佬解决我这个小白问题

疾风怪盗

1. sheet.write(i + 1, j, datalist[j])

复制代码

你这个保存出错是因为这个参数没写对，少了j，但是这样写了只写入了第一条数据

你的爬虫保存数据时有点问题，变成一个大列表了，不好循环，其实可以写成一份数据是字典或者一个列表，然后作为一个元素添加进一个总列表，然后循环就方便了

Ygh6688

疾风怪盗 发表于 2020-12-10 22:01
你这个保存出错是因为这个参数没写对，少了j，但是这样写了只写入了第一条数据

你的爬虫保存数据时有 ...

谢谢，的确我只保存了一条数据，但是我怎么循环写入字典啊，可以大致帮我修改一下嘛