W.吴所畏惧-优快云博客

原创 pandas基础

import pandas as pd #定义字典 mydataset={ 'sites':["Goodle","Runoob","Wiki"], 'number':[1,2,3] } #将字典转换为DataFrame，才能处理 mydf=pd.DataFrame(mydataset) print(mydf) #将列表转换为series a=[1,2,3] mysr=pd.Series(a,name="number") print(mysr) print(mysr[1]) #制定se.

2022-05-02 21:41:58 1091

原创 sql优化

1.对查询进行优化应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如： select id from t where num is null 可以在num上设置默认值0，确保表中num列没有null值，然后这样查询： select id from t where num=0 3.应尽量避免在 where 子句中使用!=或<>操作符，否

2022-05-02 21:37:10 182

原创 sql索引优化

#创建表 CREATE TABLE IF NOT EXISTS T1(processid INT,nextprocess INT); #创建索引 CREATE INDEX Ix_processID ON T1(processid); #a语句不使用索引 SELECT * FROM T1 WHERE nextprocess =1 AND processid IN (8,32,45); #b语句强制使用索引 SELECT * FROM T1 FORCE INDEX(IX_Processid) WHERE NE.

2022-04-24 19:25:56 225

原创 numpy函数

字符串函数 import numpy as np #字符串拼接 # print(np.char.add(['hello'],['asd'])) #输出三个‘Runoob’ # print(np.char.multiply('Runoob',3)) #在‘Runoob’左右填充”*“，总长度控制在20 # print(np.char.center('Runoob',20,fillchar='*')) #首字母大写 # print(np.char.capitalize('as')) #所有单词首字

2022-04-24 19:23:13 583

原创 sql基础查询优化

USE test; #创建表 CREATE TABLE IF NOT EXISTS cnt(id INT); #创建存储过程 DELIMITER $ CREATE PROCEDURE cnt() BEGIN #定义一个循环变量 DECLARE i INT DEFAULT 0; WHILE(i<1000) DO BEGIN SELECT i; SET i=i+1; INSERT INTO cnt(id)VALUES(i,"张"); END;...

2022-04-11 22:40:24 112

原创 Xpath基础

1.什么是xpath XPath是一门在XML文档中查找信息的语言 2.xpath中的节点关系例子： <bookstore> <book> <title>HarryPotter</title> <author>JK.Rowling</author> <year>2022</year> <price>1&lt...

2022-04-11 22:34:43 4095

原创 linux命令（网络，权限）

1.网络 1、ping 检测当前主机与目标主机之间的连通语法：#ping 地址（ip地址、主机名、域名等） 2、netstat 表示查看网络的连接信息语法：#netstat-tnlp（-t：tcp协议，-n：将字母转化成数字，-l：列出状态为监听，-p：显示进程相关信息） #netstat-an（-a：表示全部，-n：将字母转化为数字）TCP/IP协议需要使用这个命令。 3、traceroute 查找当前主机与目标主机之间所有的网关语法：traceroute 地址 2.权限

2022-04-03 20:47:54 730

原创 SQL数据库（视图，事务，触发器，存储过程）

1.视图 1.视图是什么视图（view）是一种虚拟存在的表，是一个逻辑表，本身并不包含数据。作为一个select语句保存在数据字典中的。 2.建表 vUSE info; #创建作者表 CREATE TABLE IF NOT EXISTS author( id INT NOT NULL AUTO_INCREMENT, author_name VARCHAR(50) DEFAULT NULL, PRIMARY KEY(id) ) INSERT INTO author(autho...

2022-04-03 20:33:48 577

原创 python爬虫（scrapy框架入门）

1.scrapy是什么 Scrapy，Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试. 其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的，后台也应用在获取API所返回的数据(例如 Amazon Associates Web Services ) 或者通用的网络爬虫. Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如Bas

2022-04-03 20:19:00 656

原创 linux基础（shell脚本）

1.shell入门 #先创建写shell脚本的文件，取名为test，后缀为‘.sh’ #运行后进入编辑文件 #点击“i”，开始编辑模式，左下角会出现INSERT 代码格式： #!/bin/bash [指定告知系统当前这个脚本要使用的shell解释器] Shell相关指令例子： #写完内容后点击Esc退出编辑模式，然后输入“wq”并且点击回车保存脚本。 #返回后开始赋予权限，输入“chmod +x test.sh” #运行脚本 ./test...

2022-03-20 15:32:56 580

原创 MySql数据库基础（索引篇）

#索引可看作字典的键值对，键就是索引，而值是数据库中的特定数据 #建库 CREATE DATABASE IF NOT EXISTS info DEFAULT CHARSET utf8; USE info; #建表 CREATE TABLE IF NOT EXISTS emp( emp_id INT PRIMARY KEY AUTO_INCREMENT, emp_name VARCHAR(20), salary INT, dept_id INT, manager...

2022-03-20 14:30:24 903

原创 Python爬虫基础2（正则表达式的应用）

#正则表达式筛取爬到的内容 import re from urllib import request #定义url' page=100 url='https://tieba.baidu.com/f?ie=utf-8&kw=%E6%AE%B5%E5%AD%90' +str(page) try: #定义请求头 headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML,.

2022-03-20 14:23:34 98

原创 python爬虫基础（个人笔记）

1.urllib2库的基本使用 import urllib2 #获取网页调用的是 urllib2 库里面的 urlopen 方法，传入一个 URL，这个网址是百度首页 #urlopen一般接受三个参数，urlopen(url, data, timeout) #url 即为网址，data 是访问时要传送的数据，timeout设置超时时间 # data，timeout是可以不写的，data 默认为 None，timeout 默认为 socket response = urllib2.urlopen(.

2022-03-13 21:24:07 4302

原创 Linux基础命令（个人笔记）

鼠标右键弹出此页面，点击第四个选项 1.初级指令 ls指令 1. #ls：列出当前目录下所有文件/文件夹名字 2. #ls 路径：列出制定目录下所有文件/文件夹名字 pwd指令 #pwd （打印当前工作目录） cd指令 #cd 路径（切换当前工作目录） ~表示用户家目录 mkdir指令（创建目录） # mkdir newwenjian (当前路径下创建文件) # mkdir /路径 (制定路径下创建文件) # mkdir -p /路径（一次性创建多个不存...

2022-03-12 22:19:39 1732

原创 MySQL数据库基础（个人笔记）

1.基础建库建表 #建库 CREATE DATABASE IF NOT EXISTS yuesu DEFAULT CHARSET utf8; #IF NOT EXISTS:做判断，没有就创建数据库 #yuesu 库名 DEFAULT CHARSET utf8;:设置编码格式为utf8 #使用库/调用此库 USE yuesu; #建表 #表一 CREATE TABLE IF NOT EXISTS student( id INT PRIMARY KEY,#字段名：id in...

2022-03-12 22:09:38 1118

wahgy的博客