花木兰到底好看不,我用Python爬取了几万条评论!

python实现B站评论分页爬取 变化的参数为 Jt+wt,这里的wt为固定值。并且采取了md5加密的方式,分析可得Jt的值为en中内容的综合,en内容则为负载中的固定值。2.打开开发者工具,点击网络刷新界面,下滑页面数据让数据加载出来,随便选择一条评论复制,粘贴到开发工具中的搜索框中,找到对应的包。7.这里处理w_rid参数,在源码页面中搜索,w_rid参数,查看所处位置,进行断点检测。5.实现翻页爬取时,找到变化的对应参数。 阅读详情

点击上方“菜鸟学Python”,选择“星标”公众号

超级无敌干货第一时间推给你!!!

对于神仙姐姐刘亦菲,估计很多码农都很喜欢,小编也非常喜欢她。从一开始的金粉世家里面的青涩的白秀珠,到天龙八部的神仙姐姐王语嫣,再到仙剑奇侠传里面的赵灵儿,后来挑战四大名捕里面的无情,演技也是越来越好。

现在她主演的《花木兰》 也带着一股巨浪向人们袭来,这部从拍摄之初就饱受争议的电影,于是小编在猫眼上爬取上万条的用户评价,对其进行数据分析,今天就跟大家一起对其进行探索。

01.

网站的分析

这次我们的数据爬取从猫眼电影上获取,目前有近14万的电影短片数据。经过仔细的分析,发现猫眼电影的URL有一定的规律,可以从中获取猫眼的电影评论数据,并且数据提供的格式json格式,方便操作。这个接口如下:

http://m.maoyan.com/mmdb/comments/movie/movieid.json?_v_=yes&offset=15&startTime=?

这个接口主要有两个参数:

  • movieid是指猫眼中每个电影独有的id,如《花木兰》的movieid=1210778;

  • startTime是指该页面中第一条评论的时间,在这个页面,每页共有15条评论;

然后打开每一条评论,进行解析网页,看一下里面的结构

发现关键的地方就是这个时间戳!

02.

动手写代码

有了这个接口,就可以很快的对影评进行爬取了。这里依赖于requests、json等库进行(相关的爬虫知识,去年我已经写过50多篇,这里就不赘叙,翻翻历史文章即可),获取相关信息,相关核心代码如下所示:

上面的代码主要是构造代理user_agents, headers里面的参数,把网页的爬取请求伪装成浏览器的请求。

用requests发送网络请求,然后获取comments的数据,然后进行存储到csv文件中去。CSV的读写存储技巧可以看这篇(近20年五粮液股价分析|CSV文件实战处理)

经过上面一顿猛如虎的操作,下面小编先带大家看看爬的的原始数据,主要包含了发表者的城市,评论内容,性别,用户,等级以及好评度等信息。

03 

数据分析

有了原始数据,剩下的就是对数据的清洗分析了,这里选用pyecharts库进行数据分析,因为这个使用起来非常方便,而且效果也不错。

1).整体分析

豆瓣上给这部电影的打分只有4.9,不知道为啥大家的评分这么低。我们先查看一下大家对花木兰电影的总体评分吧。

用pyecharts的Bar来直观的看一下效果:

02).好评和差评

接着我们看一下花木兰的好评和差评的对比情况:

对df的数据进行处理,提取出好评和差评的关键字进行统计分析,然后进行可视化的展示。

由图表可以看出,大家对花木兰的评价分布还是比较均衡的,也有一点两极分化的趋势,给予高分和低分的的人都比较多。小编也电影院看了一下,认为两级分化是有原因的:

  • 其迪斯尼的制作特效,以及刘亦菲的超高人气,为其吸引了大量人气,带来了一波好评;

  • 但对于熟知中国古典故事花木兰剧情的人来说,其剧情的设计是让人很难接受的,也就导致了国人的诸多差评。

2)词云分析

基于评价两级分化的现象,小编决定探究一下两级分化的原因究竟是什么,这里小编对整体评价、好评、坏评的词云分别进行绘制,绘制得到的结果如下图所示。

我们用jieba库对整个的评论进行关键字分析,看一下大家的花木兰的点评到底是啥,我们统计出点评最多的100个关键字。

由整体评价词云可以看出,整体的评价还是偏向好的一方面,大大的 “好看” 两字写在了词云中央;在差评词云中, “剧情”、“中国” 等词汇出现频率很高,表明差评的人主观感受是对剧情的不满意,其不符合中国历史故事,这一点是国人对这部电影的认可度不高的关键因素。

3)地域分析

最后小编带大家看看影评者的分布情况,大家可以找一找自己所在的城市是否也为这部票房做贡献了。

我们把上面采集到的数据集里面的每个评论的城市纬度拿出来,取前50个城市的名字,然后利用Pyecharts里面的geo库进行可视化展示。

由分布图可以看出,一线发达城市观影人数是最多的,北上广深显得尤为突出,可见一线城市人民的消费力卓越;从东西分布和南北分布来看,非常符合我国东强西弱,南强北弱的经济结构。


以上就是小编为大家带来的《花木兰》的电影分析,通过分析,我们发现其制作效果虽然可观,但是剧情方面难以让国人普遍接受。欢迎大家在留言区点评,给个三连!说说你对花木兰的看法是啥?

限于篇幅上面的源码没有展开解读,我们会在B站录制视频详细解读源码的细节和注意点,到时把源码和数据都给大家,大家记得来B站找我们。

https://space.bilibili.com/488689252

近期九大热门:
终于,Flask 迎来了真正的对手!
发现一个舔狗福利!这个Python爬虫神器太爽了,自动下载妹子图片!
盗墓热再起!我爬取了6万条《重启之极海听雷》的评论,发现了这些秘密
用Python一键生成炫酷九宫格图片,火了朋友圈
菜鸟也疯狂!8分钟用Python做一个酷炫的家庭随手记
Github获8300星!用Python开发的一个命令行的网易云音乐
一道Python面试题,硬是没憋出来,最后憋出一身汗!卧槽!Pdf转Word用Python轻松搞定!教你6招,不错的Python代码技巧!由 菜鸟学Python 原班人马打造的公众号:程序员GitHub,现已正式上线!接下来我们将会在该公众号上,为大家分享GitHub上优质的开源神器,程序员圈的趣事,坚持每天一篇原创文章的输出,感兴趣的小伙伴可以关注一下哈!点这里,领取新手福利
每日爬虫:爬取刘亦菲最美剧照 前言 最近刘亦菲的新戏《花木兰》已经预热很久,微博上也火到不行,花木兰剧照中,刘亦菲身负戎装,眼神坚毅,英姿飒爽。第一次见刘亦菲也有这么土气的一面。哈哈 仔细想想,喜欢刘亦菲已经十四五年了,所谓 一见钟情不过外貌作祟,而日久生情才知其钟灵毓秀 。附上我心目中最美小龙女美照。 话不多说,上代码开撸。 正文 爬取网站 :美桌 1、说明: 1、该网站并没有robots协议,因此可以任意爬取。标题虽... 阅读详情

相关推荐

别再手动连线了!用Tessent IJTAG的SIB和TDR,5分钟搞定复杂芯片的DFT网络分区

本文探讨了如何利用Tessent IJTAG的SIB(Segment Insertion Bit)和TDR(Test Data Register)技术,高效解决复杂芯片DFT网络分区问题。通过智能化的扫描链管理和声明式定义,显著降低连接复杂度,提升测试覆盖率和良率,适用于超大规模SoC设计。

weixin_29251131的博客 305

python爬虫:Ajax异步爬取数据(b站评论区)

爬虫时遇到很多数据并不在访问网址的返回包里,而是随着用户下拉逐步加载的,也就是用到了Ajax,那么这时我们该如何爬取我们想要的数据呢?

qq_46145027的博客 4157

避坑指南:Windows下OpenCV摄像头索引混乱问题的3种解决之道

本文详细解析了Windows下OpenCV摄像头索引混乱问题的3种解决方案,包括GUID查询法、DirectShow接口集成和注册表固化技术。针对工业视觉和智能监控场景,提供实战代码和性能优化建议,帮助开发者稳定识别多路摄像头设备,有效解决VideoCapture接口的索引漂移问题。

weixin_30836759的博客 407

(2024.9.18更新)新版从b站爬取评论的方式+代码

新版b站爬取评论接口+代码,可直接使用

m0_73689378的博客 1万+

ORCA(动态避障)算法

A物体沿着向量v1和v2移动,刚好能和B擦肩而过,不会发生碰撞;若V1和V2的夹角再小一点的话就一定会发生碰撞。A的速度为V1,B的速度为V2,A对于B的相对速度(也就是我们把B看做静止,A的速度)就是V1-V2。,那么怎么判定A的速度向量是不是在碰撞区域内呢?这就需要用A相对于B的速度来判定。红线画出来的锥形区域就是A相对于B的。

u012861978的专栏 4769

AttifyOS 3.0实战:从固件提取到物联网设备安全评估全流程解析

本文详细解析了使用AttifyOS 3.0进行物联网设备安全评估的全流程。从获取D-Link路由器固件开始,到利用其预置的Binwalk等工具完成固件提取、解包Squashfs文件系统,并深入分析Web源码进行初步安全审计。这套集成系统极大简化了环境配置,让研究人员能专注于漏洞挖掘本身,是物联网安全评估的高效工具箱。

ice55的博客 217

python爬取B站弹幕评论

python爬取B站弹幕评论

weixin_51891232的博客 2796

调用IP核、移植/复制IP核以及解决IP核被锁住/红锁问题(基于vivado)

解决不同工程IP核之间复制调用以及IP核红锁问题,让开发更简单!

weixin_44502554的博客 1万+

【2023最新B站评论爬虫】用python爬取上千条哔哩哔哩评论

马哥原创:用python爬取哔哩哔哩的B站评论数据,单个视频可爬上万条。

马哥的专栏 1万+

【OpenClaw从入门到精通】第17篇:OpenClaw巨头布局实战:阿里CoPaw/腾讯云/百度/火山引擎深度拆解(2026实操版)

2026年OpenClaw以22.8万星标登顶GitHub,引发阿里、腾讯、百度、字节等互联网巨头入局角逐。本文基于公开技术文档与实测经验,深度解析四大巨头的OpenClaw布局战略:阿里云CoPaw的全栈托管、腾讯云的流量入口绑定、百度智能云的搜索生态内嵌、火山引擎的极致智力供给。从核心原理、算法构建、实操流程三个维度,提供可直接落地的接入方案,包含完整代码示例与执行结果验证。通过流程图可视化核心架构,搭配避坑指南与选型矩阵,帮助新手快速上手、进阶读者实现多厂商协同部署。

专注于人工智能、软件开发、工控自动化、工厂数字化及智能化等领域,希望和大家共同进步! 1685

816华为OD机试真题 新系统 - 信道资源分配与掩码运 (Java/Py/C/C++/Js/Go)

816华为OD机试真题 新系统 - 信道资源分配与掩码运 (Java/Py/C/C++/Js/Go)

算法大师! 411

python 爬取亚马逊评论_花木兰到底好看不,我用Python爬取了几万条评论!

↑关注 + 星标,每天学Python新技能后台回复【大礼包】送你Python自学大礼对于神仙姐姐刘亦菲,估计很多码农都很喜欢,小编也非常喜欢她。从一开始的金粉世家里面的青涩的白秀珠,到天龙八部的神仙姐姐王语嫣,再到仙剑奇侠传里面的赵灵儿,后来挑战四大名捕里面的无情,演技也是越来越好。现在她主演的《花木兰》 也带着一股巨浪向人们袭来,这部从拍摄之初就饱受争议的电影,于是小编在猫眼上爬取...

weixin_39883091的博客 144

【OpenClaw从入门到精通】第11篇:OpenClaw 2026多模态实战全攻略:OCR/语音/图像自动化(附完整代码+双部署方案)

本文聚焦OpenClaw 2026版核心升级的多模态能力,从底层架构原理到实操落地全流程拆解。先解析“统一指令解析+多工具适配器”的核心设计逻辑,再提供阿里云规模化部署(适合批量任务)与本地汉化版部署(适合隐私数据调试)的详细步骤,含依赖安装、配置验证完整操作;随后落地三大高频实战场景——OCR合同信息结构化提取、会议录音自动转写纪要、电商商品图片智能打标,每个场景均提供可直接运行的完整代码、执行结果演示及流程说明;最后补充多模态任务避坑指南、性能优化技巧与成本控制方案。

专注于人工智能、软件开发、工控自动化、工厂数字化及智能化等领域,希望和大家共同进步! 2615

爬取电影《花木兰》评论,看网友们对它的评价如何,并实现词云图

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 以下文章来源于优快云 ,作者嗨学编程 前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。 最近新上映的电影《花木兰》,评分还是有点低 今天咱们就爬取一下花木兰这个电影评价,看看大家都是怎么评价的 基本环境配置 python 3.6 pycharm requests parsel pip in..

Python案例分享,B站视频教程:https://space.bilibili.com/523606542 1273

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

python爬取花木兰豆瓣影评,并进行词云分析

前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。 PS:如有需要Python学习资料的小伙伴可以加点击下方链接自行获取 python免费学习资料以及群交流解答点击即可加入 最近新上影的电影《花木兰》,评分还是有点低 今天咱们就爬取一下花木兰这个电影评价,看看大家都是怎么评价的 基本环境配置 python 3.6 pycharm requests parsel pip install requests pip install parsel 一、

人生苦短, 还不用Python? 1750

锂电池充电器电路设计 里面有电路

锂电池充电器电路设计 里面有电路 3.7V升压到5V电路设计。

听说花木兰评论区炸了?很难看吗?我用Python爬取下评论!

1 准备 主要做三件事: 抓取网页数据 清理数据 用词云进行展示 使用到time、jieba、re、wordcloud、numpy、matplotlib、selenium、PIL 库 2 过程思路 一、登录豆瓣 import time import jieba import re import wordcloud import numpy as np import matplotlib.pyplot as plt from selenium import webdriver from PIL

爬遍所有网站 209

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

python爬取豆瓣网花木兰短评

print("表格操作") # 表格库 import csv # a+:追加模式 newline:禁止空行加载数据 # 写 # with open("tv.csv","w",encoding="utf-8",newline="") as openFile: # data=["剧名","男主","女主"] # csv.writer(openFile).writerow(data) # datas=[["回家的诱惑","红实现","品如"],["再见难逃","鹿晗","乔欣"],["澄.

weixin_42835381的博客 236

python爬取花木兰豆瓣影评,并进行词云分析,Python程序设计基础

不知道你们用的什么环境,我一般都是用的Python3.6环境和pycharm解释器,没有软件,或者没有资料,没人解答问题,都可以免费领取(包括今天的代码),过几天我还会做个视频教程出来,有需要也可以领取~给大家准备的学习资料包括但不限于:Python 环境、pycharm编辑器/永久激活/翻译插件python 零基础视频教程Python 界面开发实战教程Python 爬虫实战教程Python 数据分析实战教程python 游戏开发实战教程Python 电子书100本。

2401_84182428的博客 608

猫眼影评分析

2020年受疫情影响影视行业受冲击较大,也没什么新的电影上映,要说20年我最期待的电影肯定是准备在20年上映的花木兰了,对花木兰的影评来一波分析先上图 接下来就是代码块了 主函数 movie_comment_analysis_main.py from film.data_analysis import data_analysis from film.gen_analy_result i...

weixin_42603784的博客 1601

Python爬取并分析B站最热排行榜,我发现了这些秘密

现在大家的生活中,已经越来越离不开B站了,2020年的第一季度,B站月活跃用户达到了1.72亿,日活跃用户也已经突破了5000万个用户。源源不断的流量让B站的up主们也是粉丝数目不断暴涨...

cainiao_python的博客 3640

最新python爬取花木兰豆瓣影评,并进行词云分析(1),面试加分的话

学好 Python 不论是就业还是做副业赚钱都不错,但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料,给那些想学习 Python 的小伙伴们一点帮助!

2401_84569514的博客 733

最全python爬取花木兰豆瓣影评,并进行词云分析,2024年最新蚂蚁金服面试java

Python崛起并且风靡,因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低,但它的晋级路线很多,通过它你能进入机器学习、数据挖掘、大数据,CS等更加高级的领域。Python可以做网络应用,可以做科学计算,数据分析,可以做网络爬虫,可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多,你需要学好基础,再选择明确的方向。这里给大家分享一份全套的 Python 学习资料,给那些想学习 Python 的小伙伴们一点帮助!

2401_84538474的博客 1278

如何获取大名鼎鼎的Hacker News信息,40行Python轻松搞定!

点击上方“菜鸟学Python”,选“星标”公众号重磅干货,第一时间到达Hacker News译为中文为黑客的新闻,看到黑客 这个词语,总带着一丝神秘,相信每个程序员都有成为一名黑客的梦想...

cainiao_python的博客 2000

简单爬取豆瓣电影花木兰热门短评

1 准备 主要做三件事: 抓取网页数据 清理数据 用词云进行展示 使用到time、jieba、re、wordcloud、numpy、matplotlib、selenium、PIL 库 2 过程思路 一、登录豆瓣 import time import jieba import re import wordcloud import numpy as np import matplotlib.pyplot as plt from selenium import webdriver from PIL impor

Jaeshn 655
上一篇: 用Python写的量化工具有多好用?真香!
下一篇: 菜鸟学点Java,这么多牛逼的Java常用Json库,没想到它最好!
菜鸟学Python
博客等级 码龄9年 8092粉丝 571原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值