[已解决]为什么我用css和xpath筛选出来都是这样的结果

赤坂Dragon

1. import requests
   
2. import parsel
   
3. from tqdm import tqdm
   
4. import pandas as pd
   
5. 
   
6. headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36'}
   
7. def get_response(html_url):
   
8.     response = requests.get(url=html_url,headers=headers)
   
9.     return response #将得到的response变量再传到下面去
   
10. 
    
11. 
    
12. def get_all_novel(html_url):
    
13.     response = get_response(html_url)#get_response(html_url)将url传到上面去
    
14.     selector = parsel.Selector(response.text)
    
15.     novel_name = selector.css('#info h1::text').get()
    
16.     href = selector.css('#list dd a::attr(href)').getall()
    
17.     for link in href:
    
18.         link_url = 'https://www.biquges.com/' + link
    
19.         html_data = get_response(link_url).text#将link带到def get_response(html_url):中去，返回的值直接text掉
    
20.         selector_1 = parsel.Selector(html_data)
    
21.         title = selector_1.xpath('//div[@class="bookname"]/h1/text()').get
    
22.         content_list = selector_1.css('#content::text').getall()
    
23.         #保存小说内容，需要的格式为txt，保存数据，要用字符串格式
    
24.         #把列表转化成字符串 str(content)强转 ''.join(列表)
    
25.         content = ''.join(content_list)
    
26.         print(title)
    
27.         #print(content)
    
28. 
    
29. url = 'https://www.biquges.com/20_20374/'
    
30. get_all_novel(html_url=url)

复制代码

为什么输出会是这样的信息，我用css和xpath筛选出来都是这样的结果，该怎么改才能把后面的章节信息正常输出

最佳答案

月排行榜 / 总排行榜

学渣李某人

2021-7-8 17:16:36

get少了一对括号,

跳转到最佳答案楼层

学渣李某人

get少了一对括号,

学渣李某人

也就是说, 你没调用函数

赤坂Dragon

看了一下午楞是没搞明白，这么一说我悟了

学渣李某人

赤坂Dragon 发表于 2021-7-8 18:34
看了一下午楞是没搞明白，这么一说我悟了

那就给个最佳吧