shawroad的博客

文章目录并发编程介绍python中的并发编程CPU密集型计算和IO密集型计算多线程，多进程，多协程的对比怎样根据任务选择对应技术全局解释器锁GIL多线程简单流程简单的一个多线程爬虫生产者消费者模式进行多线程爬虫线程安全概念线程锁使用实例线程池概念介绍线程池的使用方法使用线程池实现多线程爬虫使用线程池在flask-web服务中加速多进程多进程multiprocessing知识梳理多线程的实现使用多进程在flask-web服务中加速协程协程内容的介绍python异步IO库介绍: asyncio协程爬虫实现信号量

目录一: 软件安装 1. 安装ElasticSearch 2. 安装ElasticSearch-Head 主要是为了可视化我们存储的数据 3. 安装Kibana 4. 安装python对接ElasticSearch对接的工具包(前提是你得有个正常的python环境) 5. 安装IK分词器插件 后面会用到二: python对接ElasticSearch案例 1. 创建索引 2. 删除索引 3....

1: python中小整数对象池 Python为了优化速度，使用了小整数对象池， 避免为整数频繁申请和销毁内存空间。Python 对小整数的定义是 [-5, 256] 这些整数对象是提前建立好的，不会被垃圾回收。在一个 Python 的程序中，无论这个整数处于LEGB中的哪个位置，所有位于这个范围内的整数使用的都是同一个对象。同理，单个字母也是这样的。 上图解释: 变量...

 第一节：二叉树用list实现   from queue import Queue# 用list列表的方式实现二叉树def createNode(data, left=None, right=None): # 创建当前节点 return [data, left, right]def is_null(btree): # 判断当前树是否是空的 return...

def bubble_sort(a): # 冒泡排序 for i in range(len(a)): # 主要是判断当前这一轮过去有没有交换， # 如果有交换就将其赋值为True,如果没交换说明这一轮过去顺序都是从小到大，直接跳出循环即可。 sign = False for j in range(0, len(a)-...

                                      copy()  VS deepcopy()第一步：实验     根据上述代码可知  目前b，c都得到了a的值 。。 接着往下看     上述代码，我们给a[0]赋了100。 输出发现只有a中的值改变。。b 和c 都没改变 。。 说明b， c缺失把a中的值复制了一份，不是指复制了索引。。这句话其实有...

1：断言      assert这个关键字成为“断言”，当这个关键字后面的条件为假得时候，程序自动崩溃并抛出AssertionError的异常。  一般来说，可以用它在程序中置入检查点， 当需要确保程序中某个条件一定为真才能让程序正常工作时，assert关键字就非常有用了。     实例：list = []assert len(list) > 0 # 在此处设置断言,如...

第一步：（可忽略直接看第二步解决方案）首先我们看一下Python默认用的是哪个地址的镜像：              在命令行输入  pip help install                找出   -i, --index-url <url> 后面对应的地址就是默认的下载源地址：第二步：解决方案             Python提供了pip命令，让开发者...

了解一下命令行参数的用法先给出add_argument中参数列表，下面有常用参数使用的栗子：name or flags - 选项字符串的名字或者列表，例如foo 或者-f, --foo。 action - 在命令行遇到该参数时采取的基本动作类型。 nargs - 应该读取的命令行参数数目。 const - 某些action和nargs选项要求的常数值。 default - 如果命令...

from queue import Queue# 邻接矩阵存储class Graph: def __init__(self, mat, unconn=0): # mat = [[*, *, *, *], [*, *, *, *], [*, *, *, *], [*, *, *, *]] vnum = len(mat) for x in...

1、编辑（Editing）Ctrl + Space 基本的代码完成（类、方法、属性） Ctrl + Alt + Space 快速导入任意类 Ctrl + Shift + Enter 语句完成 Ctrl + P 参数信息（在方法中调用参数） Ctrl + Q 快速查看文档 Shift + F1 外部文档 Ctrl + 鼠标 简介 Ctrl + F1 显示错误描述或警告信息 Alt...

1： 匿名函数      lambda  参数 ：式子     示例代码： sum = lambda x,y:x+y     #这个匿名函数是计算x+y，然后将计算的结果返回给sum      eg:  func = lambda a,b:a+b                        相当于       def  func (a,b):             result = func ...

在日常的网站维护和管理中，会用到非常多的SQL语句，熟练使用对网站管理有很多好处，尤其是站群管理的时候。下面列一些常用的命令做备记。1、显示数据库 show databases显示表show tables; 2、创建用户 创建root用户密码为123 1 2 3 use mysql; grant all on *.* ...

一：vim编辑器足够强大，这里为什么要用sublime？          vim是linux下的一款编译器，但有时一些小的代码喜欢在windows下做个测试，所以就装了一个sublime ，个人来讲：sublime的一些操作我觉得比vim更容易操作。如果是刚开始写代码，我觉的用sublime更易上手。二：总结了一些我经常使用的快捷键：1:Ctrl+左 或者 Ctrl+右:按单词进行跳...

      最近在学习python3爬虫，今天学到pyspider了，然后就在win7的系统下安装pyspider，结果出现了一连串的错误首先我用pip3 install pyspider命令进行安装，结果出现pip的版本太低然后，我就用命令 python3 -m pip install -- upgrade pip 对pip管道升级，升级后的版本是pip -18.0接着用pip命...

本人的电脑是win7。。。。python的版本是3.6.。。建议python3爬虫的小伙伴别选用python3.7版下面是安装scrapy的步骤： 第一步： 安装wheel    直接在命令行输入 pip3 install wheel     //这里需强调一下，安装前一定要把python的环境变量配置好，不然pip管道用不了。 第二步：安装lxml    下载地址 https:...

1:如果没有安装pillow模块的，先安装一下pillow模块                              命令：pip install pillow2:代码：#引入绘图模块from PIL import Image,ImageDraw,ImageFont#引入随机函数模块import randomimport iodef verifycode(): #定义变...

        本人比较喜欢用sublime写代码。但最近学Python中django框架时，遇到了这种问题，都快整死我了。最后发现是空格的问题。是由于在敲代码的过程中将tab键和空格键混用。             碰到这种情况，直接将代码的每一行用tab键进行缩进。     ...

from tkinter import *import picklefrom tkinter import messageboxwindow = Tk()window.title("登录系统")window.geometry('450x300')# 用画布加载图片canvas = Canvas(window, height=200, width=500)image_file...

  ①首先得去官网下载个Python，目前最新版本我不太清除。下载链接http://www.python.org/downloads/。下载完成后直接启动python shell   开始你的python的旅程吧！      ② 此处我们把python的数据类型不过多介绍。只需强调说一句python的变量不用int ，double等定义，而是直接用。和matlab有类似之处。此处给出两个简单例子去...