爬取《三十六骑》豆瓣上短评内容和平均打分

最新推荐文章于 2020-11-28 20:57:21 发布

cbright63

最新推荐文章于 2020-11-28 20:57:21 发布

阅读量330

点赞数

CC 4.0 BY-SA版权

分类专栏：爬虫数据分析文章标签：爬虫豆瓣爬虫小项目

本文链接：https://blog.youkuaiyun.com/marioivy/article/details/98744173

数据分析同时被 2 个专栏收录

8 篇文章

订阅专栏

爬虫

1 篇文章

订阅专栏

本文介绍了一个使用Python爬取豆瓣网站上特定书籍《三十六骑》的短评内容和评分的简单项目。通过requests库获取网页内容，BeautifulSoup进行解析，正则表达式提取评分，最终计算平均评分。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

下面的代码是最近练习爬虫的小项目，具体内容为爬取《三十六骑》豆瓣上第一页短评内容和平均打分

以下是代码内容：

# -*- coding:utf-8 -*-
"""
爬取《三十六骑》豆瓣上第一页短评内容和平均打分

@author:Cbright
"""
import requests as req
from bs4 import BeautifulSoup
import re
sum = 0
r = req.get('https://book.douban.com/subject/30257985/comments/')
soup = BeautifulSoup(r.text,'lxml')
comments = soup.find_all('span','short')
for item in comments:
    print(item.string)
stars = re.compile('<span class="user-stars allstar(.*?).rating"')
p = re.findall(stars,r.text)
for star in p:
    sum = sum + int(star)
print(sum/len(p)/10)