Wzp的博客

scrapy是一个python的爬取框架，可以利用该框架爬取网络信息，这篇博客以起点中文网为例（https://www.qidian.com/），爬取小说概略信息（以下内容是在你已经配置好环境之后的基础上进行的）。下图是我们要爬取的内容。scrapy常用命令行打开命令行：（这个就不说了，如果这个都不会，下面的你就别看了）；创建新项目：scrapy startproject xxx；创建s...

在网上看到了一个爬虫教程，就跟着学了起来，出现了点问题：‘NoneType’ object has no attribute ‘find’；问题说明我是一个刚入门的小白，刚研究了点爬虫，我觉得这个问题其实就是没有找到相应的html element（网页元素），所以没有相应的元素方法，所以报错“no attribute”。只要我们准确的找到相应的元素，就可以用BeautifulSoup中的方...