hahawangcc-优快云博客

原创 spark基础

取值操作（RDD）：take(n):返回n个元素top(n):返回最大的n个元素first():返回第一个元素collect():返回所有元素元素变换（RDD）：1、map()map()函数需要一个参数，参数是一个函数，通过这个函数变换之后，返回一个新的RDD，函数一般用lambda2、flatMap()对RDD每一个元素执行函数变换，返回一个迭代器，最后展平结果3、filter()通过函数对元素...

2018-05-10 09:33:27 342

原创 sql索引和备份

索引就是用来加速查询的。数据库索引与书籍索引类似：有了索引就不需要翻遍整本书，数据库则可以直接在索引中查找，是的查找速度提高几个数量级，在索引中找到条目之后，就可以直接跳转到目标文档的位置。db.cs.find({age:100}).explain();//可以打印出查找详情db.cs.ensureIndex({age:1})//对age创建索引db.c3.dropIndex({age:1})//...

2018-03-24 13:05:45 581

原创 sql事务

SQL事务一、事务概念事务是一种机制、是一种操作序列，它包含了一组数据库操作命令，这组命令要么全部执行，要么全部不执行。因此事务是一个不可分割的工作逻辑单元。在数据库系统上执行并发操作时事务是作为最小的控制单元来使用的。这特别适用于多用户同时操作的数据通信系统。例如：订票、银行、保险公司以及证券交易系统等。二、事务属性事务4大属性：1 原子性(Atomicity):事务是一个完整的...

2018-03-22 13:22:44 220

原创 sql操作命令

CREATE TABLE `learn`.``( /* 未指定表名 */ `heihei` INT(5) UNSIGNED ZEROFILL NOT NULL AUTO_INCREMENT, PRIMARY KEY (`heihei`));注：自增和默认值不能同时存在默认 DEFAULT DROP learn; DROP DATABASE learn; #删除数据库 CREAT...

2018-03-20 13:28:27 1272

原创 sql主键约束

数据字段属性：UNSIGNED :无符号的，声明该数据不允许为负数；ZEROFILL :0填充的，不足位数用0来填充如 int（3），5 则005；AUTO_INCREMENT :自动增长的，通常用于设置主键，且为整数类型，可定义起始值和步长；NULL 、NOT NULL ：空和非空DEFAULT :默认的，用于设置默认值 MySQL主键(Primary Key)是唯...

2018-03-17 10:52:37 5326

原创 MySQL

RDBMS即关系数据库管理系统 (Relational Database Management System) oracle mysql sqlserver db2 postgresql sqlite excel数据库（Database）数据表 table 列 column 行 row 冗余主键 primary key 外键 foreign key 复合键索引参照完整性MySQL 数据类型...

2018-03-15 10:57:06 188

原创网络编程

网路变成：实现计算机与计算机间的通信通信协议：tcp：可靠，有状态的，长连接的协议，像打电话一样udp：不可靠，无连接，像发短信一样，发送的包的顺序要有编号 http：基于tcp的协议，无状态的协议ftp：文件传输协议pop3邮局协议版本3，是tcp/ip协议族中的一员smtp：简单邮件传输协议qq视频，发消息网络根据地域面积分为三类：局域网、城域网、广域网网络传递过程分七层1、物理层2、数据链路...

2018-03-13 13:33:06 137

原创线程锁

线程锁线程同步：当多个线程同时进行任务时，为了保证不会有多个线程同时对同一个数据进行操作造成不可预料的后果，所以有了锁的概念，我们通过锁来使多线程任务更安全lock=threading.Lock（）cond=threading.Condition（lock=lock）Condition：更精确的控制锁，提供了四个方法上锁（acquire（）），等待（wait...

2018-03-06 17:12:08 217

原创 python xml

xml：（在框架常用在配置文件）1、标签成对出现2、区分大小写3、标签要正确嵌套4、开始部分<?xml version="1.0" encoding="utf-8"?>5、只能有一个根节点6、节点可以有属性DTD（Document Type Definition）：约束XMl文件的节点<!DOCTYPE library [ <!EL...

2018-03-01 17:17:39 434

原创文件 file

文件：读取，写入流：stream 按字节读取：字节流；按字符读取：字符流；缓存流输入流 Input输出流 Output1.创建文件对象（路径，文件名）2.读取3.关闭file.close() 关闭文件。关闭后文件不能在进行操作。file.flush() 刷新文件内部缓冲，直接把内部缓冲区的数据立刻写入文件file.fileno() 返回一个整形的文件描述符（file ...

2018-03-01 09:42:37 287