- 博客(9)
- 收藏
- 关注
转载 python全栈(中国历史天气可视化系统)
在前面博客中写过python爬虫爬取各个城市历史天气及数据可视化,感觉还是有点粗糙,本文章是借这个例子抛砖引玉,写出个更NB的python全栈项目。 此项目预览页面全国各城市天气可视化系统 scrapy抓取全国各城市的历史天气 创建项目及准备工作 创建项目 scrapy startproject lishitianqi 创建爬虫脚本文件(考虑到tianqi...
2019-09-09 17:44:00
1508
转载 cnblog优化指南
为什么要优化 cnblog用了一段时间,发现好多问题 编辑器功能不足,影响编辑效率 美化不足,影响视觉体验 功能优化 自动添加目录 根据h2,h3标签自动生成目录,点击目录的指定条目可以跳转的指定类容,每个内容小标题上都有回到顶部目录按钮。 我只做了两级目录,只有h2存在时才生成目录,且存在h3时,h3是h2的子目录,代码如下: <scr...
2019-09-06 01:29:00
727
转载 Mysql日志详解
错误日志 错误日志会记录如下信息 mysql执行过程中的错误信息 mysql执行过程中的告警信息 event scheduler运行时所产生信息 mysq启动和停止过程中产生的信息 主从复制结构中,重从服务器IO复杂线程的启动信息 错误日志相关参数 MariaDB [(none)]> show variables where -> ...
2019-09-05 21:07:00
360
转载 scrapy抓取所有网站域名
需求分析 从一个门户网站出发,试图爬取该门户网站所有链接,如此递归下去,发现新域名则保存起来,每个域名网站只爬取一次。有了这些数据在通过外部DNS获得IP,就可以自己搭建DNS服务器了 创建项目 创建一个项目,名叫crawl_all_domainname scrapy startproject crawl_all_domainname 创建爬虫脚本domai...
2019-09-04 01:27:00
1095
转载 python设计模式
创建型模式 工厂模式 定义了一个用于创建对象的接口,让子类决定实例化哪一个类,使一个类的实例化延迟到其子类。 #鼠标基类 class Mouse: pass #戴尔鼠标类 class DellMouse(Mouse): pass #惠普鼠标类 class HpMouse(Mouse): pass #鼠标...
2019-09-02 14:18:00
149
转载 Redis集群搭建
1. Redis环境 下载redis工具包和源代码 https://github.com/microsoftarchive/redis/releases redis-trib.rb在源码的src目录下,后面需要用到 2. Ruby环境 redis的集群创建工具redis-trib.rb需要ruby环境才能运行,windows安装包如下,安装时勾选添加的环境变量 下...
2019-09-01 20:55:00
169
转载 深入理解Redis
Redis协议 Redis 的通信协议是基于文本的,且以行为划分,每行以 \r\n 结束。每一行都有一个消息头,消息头共分为5种分别如下: +表示一个正确的状态信息,具体信息是当前行 + 后面的字符; - 表示一个错误信息,具体信息是当前行-后面的字符; * 表示消息体总共有多少行,不包括当前行,* 后面是具体的行数; $ 表示下一行数据长度,不包括换行符长度 \r\n, $...
2019-08-30 22:45:00
139
转载 Python实现常用查找与排序算法
查找算法 二分查找 import doctest def binary_search(alist, item): """ >>> alist=[1,3,4,7,11,18,29] >>> binary_search(alist,1) 0 >>> binary_sea...
2019-08-27 21:23:00
174
转载 python爬虫爬取各个城市历史天气及数据可视化
前言: 爬取网站www.tianqihoubao.com上各城市的历史天气数据,并利用matplotlib将数据可视化。 代码实现: 1 import asyncio 2 import aiohttp 3 from lxml import etree 4 import re 5 from collections import ...
2019-08-21 23:07:00
3793
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅