爬虫练习：爬豆瓣读书的短评

酒城译痴无心剑

于 2019-10-03 08:35:14 发布

阅读量1.3k

点赞数

CC 4.0 BY-SA版权

分类专栏： Python编程天地

本文链接：https://blog.youkuaiyun.com/howard2005/article/details/101972925

Python编程天地专栏收录该内容

185 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了使用Python的requests和BeautifulSoup库爬取豆瓣读书《下町火箭》的短评，详细讲述了如何解析网页获取所需数据，并利用正则表达式统计短评的总星数。最后讨论了如何应对多页短评的爬取情况。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

爬虫练习：爬豆瓣读书的短评

利用第三方库requests爬取网页内容，然后利用BeautifulSoup解析网页内容，得到我们想要的数据。

任务1：爬豆瓣读书《下町火箭》的短评。

利用requests库可以爬下《下町火箭》短评的网页内容：

import requests

r = requests.get('https://book.douban.com/subject/34449306/comments/')

r.status_code
Out[3]: 200

r.text
Out[4]: '\n\n<!DOCTYPE html>\n<html lang="zh-cmn-Hans" class=" book-new-nav">\

了解本专栏

超级会员免费看