鱼C论坛

 找回密码
 立即注册
查看: 629|回复: 1

爬取中国大学排名

[复制链接]
发表于 2020-3-30 10:12:41 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
  1. import requests
  2. from bs4 import BeautifulSoup
  3. import bs4

  4. def getHTMLText(url):
  5.     try:
  6.         r = requests.get(url,timeout = 30)
  7.         r.raise_for_status()
  8.         r.encoding = r.apparent_encoding
  9.         return r.text
  10.     except:
  11.         return ''

  12. def fillUnivList(ulist,html):
  13.     soup = BeautifulSoup(html,'html.parser')
  14.     for tr in soup.find('tbody').children:
  15.         if isinstance(tr,bs4.element.Tag):  #确定tbody的儿子都是标签,无字符串
  16.             tds = tr('td')
  17.             ulist.append([tds[0].string,tds[1].string,tds[3].string])

  18. def printUnivlist(ulist,num):
  19.     print('{:^10}\t{:^6}\t{:^10}'.format ('排名','学校','分数'))
  20.     for i in range(num):
  21.         u = ulist[i]
  22.         print('{:^10}\t{:^6}\t{:^10}'.format (u[0],u[1],u[3]))

  23. def main():
  24.     uinfo = []
  25.     url = 'http://www.zuihaodaxue.com/zuihaodaxuepaiming2019.html'
  26.     html = getHTMLText(url)
  27.     fillUnivList(uinfo,html)
  28.     printUnivlist(uinfo,10)
  29. main()
复制代码


运行一直显示错误,IndexError: list index out of range,请大佬帮忙看一下~
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2020-4-5 11:17:10 | 显示全部楼层
就是超出索引访问了
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-4-20 02:06

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表