鱼C论坛

 找回密码
 立即注册
查看: 1519|回复: 1

[已解决]豆瓣top250爬虫

[复制链接]
发表于 2021-3-7 21:38:01 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
请问我这个代码为什么最后print出来的是一个空列表 我看不出是哪里的问题~
import requests
from bs4 import BeautifulSoup
def get_movies():
    movie_list = []
    headers = {
        'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36'
    }
    
    for i in range(0,10):
        link = 'https://movie.douban.com/top250?start='+str(i*25)
        r = requests.get(link,headers = headers,timeout = 10)
        print(str(i+1)+'响应状态码:',r.status_code)
        
        soup = BeautifulSoup(r.text,'lxml')
        div_list = soup.find_all('div',class_='hd')
        for each in div_list:
            movie = each.a.span.text.strip()
            movie_list.append(movie)
    return movie_list

get_movies()
print(movie_list)
最佳答案
2021-3-7 22:05:52
函数最后返回了movie_list,所以主程序只要调用get_movies函数并打印就能得到列表。
倒数第二句调用函数,因为函数只返回了movie_list并没有打印,所以没值
倒数第一句是打印了movie_list,但这个movie_list是全局变量,所以报错未定义
所以最后两句改为print(get_movies()),也就是打印函数返回值,即可。

代码如下:
import requests
from bs4 import BeautifulSoup
def get_movies():
    movie_list = []
    headers = {
        'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36'
    }
    
    for i in range(0,10):
        link = 'https://movie.douban.com/top250?start='+str(i*25)
        r = requests.get(link,headers = headers,timeout = 10)
        print(str(i+1)+'响应状态码:',r.status_code)
        
        soup = BeautifulSoup(r.text,'lxml')
        div_list = soup.find_all('div',class_='hd')
        for each in div_list:
            movie = each.a.span.text.strip()
            movie_list.append(movie)
    return movie_list

# get_movies()
# print(movie_list)
print(get_movies())
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-3-7 22:05:52 | 显示全部楼层    本楼为最佳答案   
函数最后返回了movie_list,所以主程序只要调用get_movies函数并打印就能得到列表。
倒数第二句调用函数,因为函数只返回了movie_list并没有打印,所以没值
倒数第一句是打印了movie_list,但这个movie_list是全局变量,所以报错未定义
所以最后两句改为print(get_movies()),也就是打印函数返回值,即可。

代码如下:
import requests
from bs4 import BeautifulSoup
def get_movies():
    movie_list = []
    headers = {
        'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36'
    }
    
    for i in range(0,10):
        link = 'https://movie.douban.com/top250?start='+str(i*25)
        r = requests.get(link,headers = headers,timeout = 10)
        print(str(i+1)+'响应状态码:',r.status_code)
        
        soup = BeautifulSoup(r.text,'lxml')
        div_list = soup.find_all('div',class_='hd')
        for each in div_list:
            movie = each.a.span.text.strip()
            movie_list.append(movie)
    return movie_list

# get_movies()
# print(movie_list)
print(get_movies())
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-16 08:59

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表