- 博客(17)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Flink更改web ui端口
启动了Spark集群后再启动Flink会发现8081端口被Spark占用了vim flink-conf.yaml 修改或添加（注意:后有一个空格，否则无法生效）：rest.port: 8082并将flink-conf.yaml发往集群其他节点
2021-03-01 15:24:35
8845
原创 数据结构几大排序(六)——堆排序
建立大根堆，写两个方法，一个sift()调整，一个是堆排序heapSort()，需要注意的是实际排序时要从下标1开始，因为涉及父节点与孩子节点的编号关系，那么从0开始是不合理的Java/** * @author LiuZhiguo * @date 2019/6/16 15:18 */public class HeapSort { public static void si...
2019-12-16 22:20:16
263
原创 数据结构几大排序(五)——快速排序
Java/** * @author LiuZhiguo * @date 2019/10/1 16:16 */public class QuickSort { public static void quickSort(int[] arr,int low,int high){ int i,j,temp,t; if(low>high) ...
2019-12-16 22:18:36
252
原创 数据结构几大排序(四)——简单选择排序
Java/** * @author LiuZhiguo * @date 2019/10/1 16:31 */public class SelectSort { public static void selectSort(int[] arr, int n) { int i, j, mini; int temp; for (i=0;...
2019-12-16 22:16:09
155
原创 数据结构几大排序(三)——冒泡排序
Java/** * @author LiuZhiguo * @date 2019/10/14 10:41 */public class BubbleSort { void bubbleSort(int[] R, int n){ for (int i=n-1;i>=1;i--){ int flag = 0; ...
2019-12-16 22:14:09
144
原创 数据结构几大排序（二）——折半排序
Java/** * @author LiuZhiguo * @date 2019/10/14 9:55 */public class BinaryInsertionSort { public void binaryInsertionSort(int[] R, int n){ for (int i=1;i<n;i++){ int l...
2019-12-16 22:11:28
278
原创 数据结构几大排序(一)——直接插入排序
Java/** * @author LiuZhiguo * @date 2019/6/11 20:14 */public class InsertSort { void insertSort(int R[], int n){ int i, j; int temp; for (i=1;i<n;i++){ ...
2019-12-16 22:08:58
146
原创 BFPRT算法，寻找第K小（大）或前K小（大）的最快方法
BFPRT算法，是Blum、Floyd、Pratt、Rivest、Tarjan提出，最坏时间复杂度为O(n)。它是针对TOP-K问题的极好方法。算法思想：将原始序列中所有元素按5个元素一组进行划分，最后一组可能少于5个元素，对每一组元素进行插入排序选出中间的元素即为中位数，这个过程每组可以同时进行； 递归寻找各组中位数组合起来的新子序列的中位数和其下标； 利用快速排序的思想，将这个中位...
2019-10-12 11:20:02
391
原创 python中[-1]、[:-1]、[::-1]、[n::-1]的使用方法
import numpy as npa = np.random.rand(5)print(a)[0.45109132 0.63675963 0.51812938 0.38780661 0.92640207]print(a[-1]) #打印最后一个元素0.926402067797278print(a[:-1]) #打印除了最后一个元素[0.45109132 0.6367596...
2019-09-23 16:02:33
525
原创 Kafka+Spark Streaming+Redis Spark streaming实时读取kafka中数据完成wordcount并写入redis中
集群或虚拟机提前安装好spark、kafka和rediswindows环境安装好scala用idea创建maven工程spark版本2.2.0pom文件内容如下：<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" ...
2019-07-23 10:54:59
819
1
原创 Exit 13 storm nimbus 的解决
如果防火墙已经关闭的话：在/etc/hosts中最后加上本机地址及本机名（通过hostname命令查看本机名）添加本机名后，重新启动storm nimbus & 启动成功！...
2019-06-20 17:49:07
557
原创 安装jzmq出现的问题：make[1]: Leaving directory `/data/master/jzmq-master/src'
问题出现如下：Making all in srcmake[1]: Entering directory `/data/master/jzmq-master/src'make[1]: *** No rule to make target `classdist_noinst.stamp', needed by `org/zeromq/ZMQ.class'. Stop.make[1]: Le...
2019-06-18 15:16:26
1444
原创 bash sed command not found... 解决办法
bash sed command not found...非root用户的所有命令都不能用了，我这里是hadoop用户，比如subash su command not found...lsbash ls command not found...解决办法：switch user 到rootroot的命令还是可以用的接下来：gedit /home/hadoop/...
2019-05-14 19:09:02
12982
原创 彻底解决bash: hadoop: command not found...等问题
经常会在使用hadoop或者其他命令的时候出现这么一行：bash：hadoop：command not fount解决办法：$ gedit /etc/profile进入编辑器后，添加Hadoop路径：export HADOOP_HOME=/opt/hadoop-2.6.0-cdh5.6.0export PATH=$PATH:$HADOOP_HOME/bin:$PATH保存后关...
2019-05-09 09:55:43
27161
5
原创 Exception in thread "main" java.lang.ClassNotFoundException: wordcount问题的解决
出现问题后提示如下：[hadoop@master ~]$ yarn jar /opt/eclipse/wc.jar org.apache.hadoop.examples.wordcount /lzg/words /lzg/outputException in thread "main" java.lang.ClassNotFoundException: org.apache.hadoop.e...
2019-03-19 19:45:16
9382
1
原创 Centos7 配置ssh结点间免密登录
1.三个结点的信息IP地址：服务器名称网卡名称用户名主目录192.168.202.10 master eth0 hadoop / home / hadoop192.168.202.11 slave1 eth0 hadoop / home / hadoop 192.168.202.12 slave2 eth0 hadoop / home / hadoop ...
2018-12-04 11:45:52
593
原创 python中linspace()和arange的区别
函数linspace()通过指定起始值，结束值，值的个数来创建表示等差数列的一维数组，可以通过参数endpoint指定是否包含终值，默认值为True，即包含终值。函数arange()类似于内置函数range()，通过指定起始值、结束值和步长创建表示等差数列的一维数组，注意得到的结果数组不包含终值。...
2018-11-19 16:25:57
607
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人