用requests、bs4库爬取各地大学高校排名

盘哈大仙Owen

于 2019-09-27 20:55:53 发布

阅读量420

点赞数

分类专栏：爬虫

本文链接：https://blog.youkuaiyun.com/Owen_panjx/article/details/101560680

版权

本文介绍了如何使用Python的requests和BeautifulSoup（bs4）库来爬取并解析网络上的大学高校排名信息。通过示例代码详细讲解了请求网页、解析HTML、提取关键数据的步骤，帮助读者掌握网络爬虫的基本技巧。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
from bs4 import BeautifulSoup
import bs4


def getHTMLtext(url): #提取
    try:                                      #爬取网页的通用代码框架
        r = requests.get(url,timeout = 30)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return '爬取失败'

def fillUnivlist(ulist,html

最低0.47元/天解锁文章