- 博客(12)
- 收藏
- 关注
RSS订阅原创 HBase安装和部署
安装JDK https://mp.youkuaiyun.com/postedit/103292614 安装Zookeeper https://mp.youkuaiyun.com/postedit/103020005 安装Hadoop https://mp.youkuaiyun.com/postedit/103292938 安装HBase 下载 解压 tar -zxvfhbase-1.2.0-cdh5.15.1.t...
2019-11-28 15:03:33
186
原创 Hadoop安装
安装JDK https://mp.youkuaiyun.com/postedit/103292614 安装Hadoop https://mp.youkuaiyun.com/postlist 下载、解压 进入到hadoop目录下的 /etc/hadoop/内 修改 hadoop-env.sh 添加JAVA_HOME core-site.xml ...
2019-11-28 14:55:39
149
原创 JDK安装
下载java安装包， 解压到指定目录下，如app下 tar -zxvf java安装包 -C ~/app/ 进入解压目录 pwd获取当前目录复制 配置当前登录用户java环境变量 vi ~/.bash_profile 添加 export JAVA_HOME=java解压目录 export PATH=$JAVA_HOME/bin:$PATH 保存后执行更新环境变量 ...
2019-11-28 14:19:16
151
原创 Kakfa安装部署
下载、解压、配置环境变量 tar -zxvf kafka安装包 vi ~/.bash_profile export KAFKA_HOME=安装包解压位置 export PATH=$KAFKA_HOME/bin:$PATH 安装kafka前提 JDK zookeeper ：https://blog.youkuaiyun.com/x670667585/article/details/103020...
2019-11-15 16:34:01
155
原创 cdh maven依赖仓库
<!--引入CDH的仓库--> <repositories> <repository> <id>cloudera</id> <url>https://repository.cloudera.com/artifactory/cloudera-repos</url> </reposito...
2019-11-14 22:01:06
482
原创 Redis key过期监听事件
一、修改redis配置 打开 notify-keyspace-events Ex 配置注释 二、项目中是否已添加redis依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-red...
2019-11-13 10:20:57
607
原创 zookeeper -cdh 安装部署
下载、解压、配置环境变量 export ZK_HOME=解压目录 export PATH=$ZK_HOME/bin:$PATH 到conf目录下复制 cp zoo_sample.cfg zoo.cfg 修改zoo.cfg下的数据目录（dataDir），自己创建一个，避免重启后丢失 tmp目录重启会删除 到bin目录执行启动命令 ./zkServer.sh start...
2019-11-11 22:44:36
411
原创 Flume:（四）FLUME使用（监控一个文件数据新增，输出到控制台）
agent：exec scource + memory channel + logger sink # example.conf: A single-node Flume configuration # Name the components on this agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 # Descr...
2019-11-10 10:35:32
446
原创 Flume:（三）FLUME使用（监听端口输出信息到控制台）
打开官网， documentation目录下，user guide setup中的例子拷贝出来修改 FLUME使用主要是写配置文件： 配置Source 配置Channel 配置Sink 串联Source、Chanel、Sink a1:agent的名称 r1：Source的名称 c1：Channel的名称 k1：Sink的名称 # example.conf: A single-no...
2019-11-10 10:15:59
491
原创 centos7安装telnet
检查 rpm -qa telnet-server rpm -qa xinetd 安装 yum -y install telnet-server.x86_64 yum -y install telnet.x86_64 yum -y install xinetd.x86_64 设置开机启动 systemctl enable xinetd.service systemctl...
2019-11-10 10:12:16
139
原创 Flume:（二）安装部署
前置条件： 1、安装 JDK1.8 2、足够的内存、磁盘空间 3、文件目录权限 安装JDK 下载、解压、配置环境变量 vi ~/.bash_profile 添加 export JAVA_HOME=(解压目录) export $PATH=$JAVA_HOME/bin:$PATH source ~/.bash_profile 测试：java ...
2019-11-10 09:18:43
121
原创 Flume:（一）架构及核心组件
agent 内包含source、channel、sink 1、Source 收集 2、Channel 聚集 3、Sink 输出 Web Service ===> Source===> Channel ===> Sink ===> HDFS... 从web服务收集数据到flume，sink到HDFS、Hbase等目...
2019-11-10 08:55:25
203
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人