python学习爬取豆瓣电影名称及评分

learn_is_happy

于 2017-12-16 07:42:59 发布

阅读量3.1k

点赞数 1

CC 4.0 BY-SA版权

文章标签： python 豆瓣 url

本文链接：https://blog.youkuaiyun.com/learn_is_happy/article/details/78817980

本文介绍了使用Python进行网络爬虫的基本步骤，通过实例演示如何爬取豆瓣电影网站上的电影名称和评分，从而掌握HTTP请求、解析HTML及数据存储等核心技术。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
from bs4 import BeautifulSoup
import bs4
import re
def getHTMLText(url):
    try:
        r = requests.get(url)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ""


def fillUnivList(ulist,rlist,html):
    count=0
    soup