Amy8020的博客

python3 csv文件多空行

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xb2 in position 0: invalid start byte

正则表达式

正则表达式

Scrapy入门 Scrapy是Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据，任何人都可以根据需求方便的修改。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。工作原理 引擎(Scrapy) 用来处理整个系统的数据流, 触发事务(框架核心)调度器(Scheduler) 用来接受引擎发过来的请求, 压入队列中, 并...

Request 与 Scrapy相同点： 都可以进行界面请求和爬取 二者都没有处理JS、提交表单、应对验证码等功能（可扩展）不同点：RequestScrapy页面级爬虫网站极爬虫功能框架并发性考虑不足，性能较差（著名网站反爬，慢也有优势）并发性好，性能较高重点在于页面下载重点于爬虫结构定制灵活一般定制灵活，深度定制困难上手简单...

命题交互式输入网址，爬取网页中全部图片思路读取网页中源码根据网页源码制定正则表达式，进行匹配存取图片至本地交互模式输入网址，若不输入则按默认网址爬取(http://findicons.com/pack/2787/beautiful_flat_icons)知识点根据源码编写正则表达式：reg=r’src="(.+?.png)" alt’为提升速度，进行编译匹配imgre=...