python爬虫初探（爬取bilibili视频的评论）

MexLink?IN.EX?

于 2021-02-03 19:10:28 发布

阅读量593

点赞数

CC 4.0 BY-SA版权

分类专栏：老python萌新了

本文链接：https://blog.youkuaiyun.com/FNAspectOL/article/details/113617390

老python萌新了专栏收录该内容

6 篇文章

订阅专栏

本文介绍了一个简单的B站评论爬虫实现，通过requests库获取指定视频评论区JSON数据，并利用Python字典来整理和输出用户名及其对应的评论内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >


import requests
import json
# import pprint

coll = {}

url = "https://api.bilibili.com/x/v2/reply?&jsonp=jsonp&pn=1&type=1&oid=884129021&sort=2&_=1612337407736"
data = json.loads(requests.get(url).text)
for i in data["data"]['replies']:
    coll[i['member']["uname"]] = i["content"]["message"]
print(coll)

代码看起来很短却有很多知识点

总的来说这些包就要学会快速掌握
1. requests
2. json （json的 key:value 本质要掌握）
3. pprint 要学会看json的格式与找到索引
这个爬虫仅限于可通过url获取的json处理，如何巧妙获取json；那么有没有其他方法？
python 字典的应用
1. dict.popitem()
2. dict = {“python”:“pip”, “ndoe.js”:“npm”}
如何更好的遍历永远是问题对于for i in range 更深的理解
爬取有效信息的方法
https://blog.youkuaiyun.com/weixin_41931548/article/details/94721736