zhousishuo-优快云博客

原创 hive学习笔记4：sort by 、order by

1.order by 子句在order by子句中有一些限制。在strict模式(hive.mapred.mode=strict)下，order by子句后面必须有limit子句。如果设置hive.mapred.mode=nonstrict，limit子句不一定需要。原因是为了对所有结果进行整体的排序，必须使用一个reducer来对最后的结果进行排序。如果结果的总行数太大，单个reducer可

2018-01-25 21:54:51 11527

原创 hive学习笔记1：hive使用基本命令

退出命令：quit 或 exit查询配置的变量：set -v配置变量：set =添加files，jars等：add file[s] | jar[s]列出已添加的资源：list file[s] | jar[s]执行在CLI中的Hive查询语句： source FILE

2018-01-23 17:27:35 374

原创 KNN 图像分类python实现

KNN 算法 python

2017-12-22 23:01:32 10212 3

原创 python通过某个字段将记录分组

python3-cookbook groupby defaultdict

2017-10-30 11:16:28 4849

原创 pyplot画散点图

python matplot plot scatter

2017-09-12 16:44:41 14635 1

原创 pyspark中like的用法

pyspark 通配符 like使用

2017-09-07 20:16:37 6229

原创 python之datetime

python datetime strftime

2017-07-19 16:50:08 426

原创使用seaborn画堆积柱状图

csv pandas seaborn pyspark.sql

2017-07-18 20:47:07 29168

原创 YARN常用的3种调度器

yarn 调度 FIFO Scheduler Capacity Scheduler Fair Scheduler

2017-06-27 17:30:41 1233

原创 spark sql加载parquet格式和json格式数据

parquet orc json spark sql

2017-06-23 15:15:51 6734

原创 anaconda3 安装python包

anaconda3 python3.6

2017-06-18 12:12:53 19976

原创 spark sql 之join等函数用法

spark sql join cast row_number()

2017-06-15 16:22:05 39868

原创 python中对于“+”符号，不同的数据类型表现的不同的行为

python中的“+”

2017-05-16 23:12:02 1005

原创 IntelliJ IDEA安装scala插件并创建scala示例

参考博客： 1.http://blog.youkuaiyun.com/a2011480169/article/details/52712421 2.http://blog.youkuaiyun.com/stark_summer/article/details/42460527 3.https://www.jetbrains.com/help/idea/2017.1/creating-and-running-your-

2017-05-10 23:16:10 30755 2

plot画图数据

用于matplotlib作图，这些数据很方便用来画散点图，也可以用来画其他的图形。本人在使用此数据时，主要使用了scatter()函数和plot()函数。

2017-09-11

柱状图数据cid3

画柱状图的数据

2017-07-18

原始数据part-00000.csv

使用matplot和seaborn作图

2017-07-18

trans-part-csv

对part-00000.csv改写后的数据

2017-07-18

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

zhousishuo

原创 hive学习笔记4：sort by 、order by

原创 hive学习笔记3：group by子句

原创 hive学习笔记2：select 查询

原创 hive学习笔记1：hive使用基本命令

原创 python3引入自定义模块

原创 KNN 图像分类python实现

原创 PCA python实现

原创 python通过某个字段将记录分组

原创 pyplot画散点图

原创 pyspark中like的用法

原创 python之datetime

原创使用matplot画柱状图

原创使用seaborn画堆积柱状图

原创 Presto初步认识

原创 YARN常用的3种调度器

原创 spark sql加载parquet格式和json格式数据

原创 anaconda3 安装python包

原创 spark sql 之join等函数用法

原创 Hive的数据存储

原创 Hive的复杂数据类型之Array

原创 hive管理之命令行方式CLI

原创 python之函数

原创 python之list复制

原创 python中对于“+”符号，不同的数据类型表现的不同的行为

原创数据开发岗找实习心得

原创 IntelliJ IDEA安装scala插件并创建scala示例

plot画图数据

柱状图数据cid3

原始数据part-00000.csv

trans-part-csv

空空如也