donger__chen的博客

算法部分1、给定一个大文件(即无法一次性加载到内存中，以下的大文件均为该定义)，每行代表一个访问IP，统计出现次数最多的IP。1)逐行读取数据，并将数据映射(如取模)到N个小文件中；2)以IP为Key，频率为Value，分别统计每个小文件中每个IP出现的次数；3)找出每个小文件中出现次数最多的IP；4)对这N个小文件出现次数最多的IP进行排序，得到最终结果。2、在1的基础上，求...

1.监控数据 官方案例实现cd ../flumemkdir jobcd jobvim flume-telnet-logger.conf# example.conf: A single-node Flume configuration# Name the components on this agent#a1=agent1 r1 shuruyuan k1 shuchudi ...

启动#!/usr/bin/env bashecho "start zkServer..."for i in master node1 node2 node3[修改为自己的节点]doecho $issh $i "source $ZOOKEEPER_HOME/bin/zkServer.sh start"done就是通过ssh 在其它节点上执行启动操作关闭#!/us...