13714309891 发表于 2020-3-22 17:10:28

我想完成一个在知乎爬取热榜排行榜如何保存到exel表格里面 ，但是到了保存Exel表格...

我想完成一个在知乎爬取热榜排行榜如何保存到exel表格里面 ，但是到了保存Exel表格那一步出现了问题 请大神帮忙！！！

from lxml import etree
import requests
import openpyxl
import csv


def get_url(url):
   
   
    headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36",
                     'Cookie':'_zap=99431b2c-8767-4685-b98b-cd9d0d3d88cd; _xsrf=5p5XGCN215CjXjnbPuj1OmbQmvR2pQdQ; d_c0="AKDg7kP8dxCPTsNRshHIPT2mH69mOZb8xuE=|1575709991"; z_c0="2|1:0|10:1575709998|4:z_c0|92:Mi4xa2poTkNBQUFBQUFBb09EdVFfeDNFQ1lBQUFCZ0FsVk5MYnZZWGdEZ0xuLWJoVWFzV2ZtYjk4T2M3dHNYa1lRd1dn|ab32d6e8ac6c6c86e72b218ad426d24b26d9adea21fdbd28afe64ada5ac53e77"; _ga=GA1.2.2089582079.1583647145; q_c1=5919a9b1025f437f8105f1a16a9f0d36|1583647148000|1575710038000; _gid=GA1.2.633099727.1584344528; tst=h; tshl=; Hm_lvt_98beee57fd2ef70ccdd5ca52b9740c49=1584357660,1584362899,1584406978,1584411187; Hm_lpvt_98beee57fd2ef70ccdd5ca52b9740c49=1584420694; KLBRSID=53650870f91603bc3193342a80cf198c|1584420984|1584420275'}

    ret = requests.get(url, headers=headers)
    ret.encoding = 'GBK'
    html_str = ret.content.decode()
    html = etree.HTML(html_str)
    res= html.xpath("//section[@class='HotItem']")

    return res

#获取知乎热榜排名、标题、热度
def get_data(res):
    with open(r'知乎热榜排名.csv', 'w', encoding='utf-8', newline='') as f:
      write = csv.writer(f)
      for table in res:
            data = {}
            data['排名'] = table.xpath(".//div[@class='HotItem-index']/div/text()")
            data['标题'] = table.xpath(".//div[@class='HotItem-content']/a/h2/text()")
            data['热度'] = table.xpath(".//div[@class='HotItem-metrics HotItem-metrics--bottom']/text()")
            data['地址'] = table.xpath(".//div[@class='HotItem-content']/a/@href")

            write.writerow(data)
   


def main():
    url = "https://www.zhihu.com/hot"
    res = get_url(url)
    get_data(res)
   

   
if __name__ == "__main__":
    main()


wp231957 发表于 2020-3-22 18:44:48

翻好几遍，也没看到错误在哪

13714309891 发表于 2020-3-22 19:33:36

wp231957 发表于 2020-3-22 18:44
翻好几遍，也没看到错误在哪

不是错误 是在写入Exel表格那个地方 写不了exel里面是空的

wp231957 发表于 2020-3-22 19:46:02

13714309891 发表于 2020-3-22 19:33
不是错误 是在写入Exel表格那个地方 写不了exel里面是空的

你没爬到正确数据呢？

Justin1 发表于 2020-3-22 20:18:06

请问怎么发带有灰色框框的代码啊，小白不大懂

13714309891 发表于 2020-3-22 21:05:11

wp231957 发表于 2020-3-22 19:46
你没爬到正确数据呢？

print(data) 有我要的数据 都是保存不到Exel里面

13714309891 发表于 2020-3-22 21:07:11

Justin1 发表于 2020-3-22 20:18
请问怎么发带有灰色框框的代码啊，小白不大懂

图片旁边有个<>
页: [1]
查看完整版本: 我想完成一个在知乎爬取热榜排行榜如何保存到exel表格里面 ，但是到了保存Exel表格...