中国大学排名的网站是最好大学里面的一个网页排名,好多都是2016年的,改成2019年的大学排名,也不难的。
# -*- coding: utf-8 -*-
"""
爬取中国大学2019年排名
"""
import requests, bs4
from bs4 import BeautifulSoup
url = "http://www.zuihaodaxue.cn/zuihaodaxuepaiming2019.html"
schoolInfro = []
# 利用 requests 库爬取网页内容
def getHTMLText(url):
try:
r = requests.get(url)
r.raise_for_status()
r.encoding = r.apparent_encoding
return r.text
except:
return ""
# 利用 BeautifulSoup 库解析提取爬取到的信息
def fillUnivList(html, infro):
soup = BeautifulSoup(html, "html.parser")
for tr in soup.find('tbody').children:
# 下面 if 语句保证了 'tr' 是标签而不是字符串
if isinstance(tr, bs4.element.Tag):
tds = tr.find_all('td')
# 注意添加信息的时候,由于有多个元素,因此要使用 list 的形式
infro.append([tds[0].string, tds[1].string, tds[3].string])
# 将需要的信息打印出来
def printUnivList(infro, num):
# tplt_1, tplt_2 与打印格式相关,使用两个不同的是为了对齐、美观
# chr(12288) 表示采用中文字符的空格填充
tplt_1 = "{0:^10}\t{1:{3}^9}\t{2:^6}"
tplt_2 = "{0:^10}\t{1:{3}^10}\t{2:^10}"
print(tplt_1.format("排名", "学校名称", "总分", chr(12288)))
for i in range(num):
u = infro[i]
print(tplt_2.format(u[0], u[1], u[2], chr(12288)))
def main():
html = getHTMLText(url)
fillUnivList(html, schoolInfro)
printUnivList(schoolInfro, 30)
main()
注:以上仅是个人意见,仅供参考。可能参考了某篇文章没有说明,敬请原谅,联系后可修改。