
爬虫
飞翔的老鹰
折腾,学习,没有止境
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Python爬虫 爬取懒加载页面(以站长素材为例)
一.什么是懒加载我就简单的说一下。当你去访问一个页面的时候,这个页面可能会有很多的信息,比如淘宝,京东之类的。如果你一次性完整的加载出这个页面。显然耗时长一点,并且对于用户和服务器都是不友好的。懒加载就是当你浏览到某个图片的位置,它才会加载出来。比如你在看小说,你屏幕所没有显示到的内容...原创 2020-04-19 18:52:40 · 7938 阅读 · 4 评论 -
细说Python爬虫爬取小说
我们爬取的是诗词名句网的三国演义,这个会爬了其余都同理了。我喜欢先上代码说话。# 爬取三国演义-----------预备阶段from bs4 import BeautifulSoupimport requestsurl = 'http://shicimingju.com'headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT ...原创 2020-04-19 10:00:18 · 3484 阅读 · 8 评论