Jesszen的博客

服务器：Centos  7.2 64位本地电脑：windows 10 64位登陆方式：mobaxterm第一：redis 数据库的介绍定义：redis 主要基于内存存储和运行的，能够快速响应键值数据库产品。应用场景：少量数据存储，高速读写访问。TRDS、Mongodb、Redis比较比较项TRDB【关系型数据库】Mongodbredis读写速度1一般较快最快读写速度2基于硬盘读写，强约束基于硬盘读...

背景：崔庆才的爬虫学习笔记整体架构： 获取模块【各大网址爬取代理】----->存储模块【redis有序集合存储】<==========>检测模块                                                                    ||                                     ...

背景：利用代理池爬取微信公众号文章并保存架构：巨坑：实例的名不可于类的名重复。第一：请求及请求队列1、为什么要创建weixinrequest()？      因为Sogou微信搜索反爬虫能力强，response.status_code容易出现302，也就是需要输入验证码。当然解决这个问题有两个途径，一个是调用验证码自动识别，另一个是将该302连接重新放回请求队列，更好代...