使用Python爬取最好大学网大学排名

#-*-coding:utf-8-*-  
'''''
Created on 2017年3月17日
@author: lavi
'''  
import requests  
from bs4 import BeautifulSoup  
import bs4  
def getHTMLText(url):  
    try:  
        r = requests.get(url)  
        r.raise_for_status  
        r.encoding = r.apparent_encoding  
        return r.text  
    except:  
        return ""  
 
def fillUnivList(univList,html):  
    soup = BeautifulSoup(html,"html.parser")  
    for tr in soup.find("tbody").children:  
        if isinstance(tr,bs4.element.Tag): #tobody有的节点是空串,属于要判断类型进行过滤  
            tds = tr("td") #等价于tr.find_all("td")  
            univList.append([tds[0].string,tds[1].string,tds[2].string]) #NavigableString可以跨越多个层次  
 
def printUnivList(univList,num):  
    tplt = "{0:^6}\t{1:^10}\t{2:^6}" #:前的数字说明使用format函数的第几个参数填充模板  
    print(tplt.format("排名","学校名称","总分",chr(12288)))  
    for i in range(num):  
        u = univList[i]  
        print(tplt.format(u[0],u[1],u[2],chr(12288)))  
def main():  
    url= "http://www.zuihaodaxue.cn/zuihaodaxuepaiming2016.html";  
    html = getHTMLText(url)  
    univList=[]  
    fillUnivList(univList,html)  
    printUnivList(univList,20)  
      
main()

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值