爬虫
关注
分享
扫一扫
一只特立独行的.喵
理想很美，很想实现
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Python爬虫爬取《哪吒之魔童降世》影评并分析
手机打开全部评论。复制链接到电脑开发者选项打开。评论是动态加载的，向下滑动找到影评json数据。Python代码。import pymongoimport requestsimport json#获取数据库的主机名，端口名和数据库名host = "主机名"port = 端口名dbname = "Comments"#创建数据库的连接client ...原创 2019-08-02 18:02:20 · 3490 阅读 · 4 评论 -
利用scrapy爬虫框架爬取书目信息
笔者是python3.6+pycharm的环境爬取书目的网址是：http://books.toscrape.com 该网站是专门提供给爬虫初学者爬取的网站。安装scrapy：任何系统都可以使用pip安装scrapy框架>pip install scrapy#安装成功后查看版本信息>scrapy versionScrapy 1.5.1#笔者的scrapy版本是1.5....原创 2019-08-26 19:33:47 · 976 阅读 · 0 评论