这是一个Python爬虫，用于爬取并存储新浪微博用户的详细信息，包括用户数据、微博内容、图片和视频。可选择将数据保存到txt、csv、json、MySQL、MongoDB或SQLite。同时提供了免cookie版，支持下载图片和视频。程序需要设置cookie以获取访问权限，或者使用免cookie版。爬取的信息包括用户昵称、性别、生日、微博数、关注数等，并包含微博的详细信息如内容、发布时间、点赞数等。
Weibo Spider
本程序可以连续爬取一个或多个新浪微博用户（如胡歌、迪丽热巴、郭碧婷）的数据，并将结果信息写入文件或数据库。写入信息几乎包括用户微博的所有数据，包括用户信息和微博信息两大类。因为内容太多，这里不再赘述，详细内容见获取到的字段。如果只需要用户信息，可以通过设置实现只爬取微博用户信息的功能。本程序需设置cookie来获取微博访问权限，后面会讲解如何获取cookie。如果不想设置cookie，可以使用免cookie版，二者功能类似。
具体的写入文件类型如下：
写入txt文件（默认）
写入csv文件（默认）
写入json文件（可选）
写入MySQL数据库（可选）
写入MongoDB数据库（可选）
写入SQLite数据库（可选）
下载用户原创微博中的原始图片（可选）
下载用户转发微博中的原始图片（免cookie版特有）
下载用户原创微博中的视频（可选）
下载用户转发微博中的视频（免cookie版特有）
下载用户原创微博Live Photo中的视频（免cookie版特有）
下载用户转发微博Live Photo中的视频（免cookie版特有）
内容列表
获取到的字段
本部分为爬取到的字段信息说明，为了与免cookie版区分，下面将两者爬取到的信息都列出来。如果是免cookie版所特有的信息，会有免cookie标注，没有标注的为二者共有的信息。
用户信息
用户id：微博用户id，如"1669879400"，其实这个字段本来就是已知字段
昵称：
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
