爬虫-知乎-评论

最新推荐文章于 2024-11-01 16:09:04 发布

GoldenFong

最新推荐文章于 2024-11-01 16:09:04 发布

阅读量868

点赞数

CC 4.0 BY-SA版权

分类专栏：爬虫文章标签：数据分析 python 爬虫

本文链接：https://blog.youkuaiyun.com/weixin_50248555/article/details/121410656

本文介绍了如何使用Python爬虫从知乎热榜话题《男子因太能吃被「自助」餐厅拉黑》的评论区抓取数据。通过分析网页加载过程，发现评论页面通过改变offset参数实现分页，offset以5为单位递增。作者提供了思路和部分代码参考。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

思路&代码参考微信公众号：Python与Excel之交，作者小刀

以知乎热搜《男子因太能吃被「自助」餐厅拉黑，餐厅此种行为合法吗？》为例

网页：男子因太能吃被「自助」餐厅拉黑，餐厅此种行为合法吗？ - 知乎

进入浏览器的开发者模式

评论往下拉就会自动生成下一页，会有新的数据包

真实的url

https://www.zhihu.com/api/v4/questions/499739058/answers?include=data%5B%2A%5D.is_normal%2Cadmin_closed_comment%2Creward_info%2Cis_collapsed%2Cannotation_action%2Cannotation_detail%2Ccollapse_reason%2Cis_sticky%2Ccollapsed_by%2Csuggest_edit%2Ccomment_count%2Ccan_comment%2Ccontent%2Ceditable_content%2Cattachment%2Cvoteup_count%2Creshipment_settings%2Ccomment_permission%2Ccreated_time%2Cupdated_time%2Creview_info%2Crelevant_info%2Cquestion%2Cexcerpt%2Cis_labeled%2Cpaid_info%2Cpaid_info_content%2Crelationship.is_authorized%2