
big data集群搭建配置
zhou_zhao_xu
这个作者很懒,什么都没留下…
展开
-
kafka安装与使用
文章目录Apache Kafka一、概述架构应用场景核心概念Topic和Log二、环境搭建准备工作安装配置环境配置启动服务三、基础使用命令行操作Topic使用发布和订阅JAVA DriverMaven依赖准备工作生产者消费者四、高级部分偏移量控制消费方式订阅(Subscribe)指定消费分区重置消费位置消费组自定义对象类型的传输序列化接口自定义对象导入工具包的依赖jar包自定义编解码器类测试生产者...原创 2019-11-26 08:56:32 · 1406 阅读 · 0 评论 -
Linux时钟同步
[root@HadoopNodeX ~]# yum -y install ntpdate[root@HadoopNodeX ~]# ntpdate -u ntp.api.bz25 Sep 11:19:26 ntpdate[1749]: step time server 114.118.7.163 offset 201181.363384 sec[root@HadoopNodeX ~]# da...原创 2019-11-26 08:34:02 · 337 阅读 · 0 评论 -
Flume的安装与使用
文章目录Apache Flume一、概述二、环境搭建安装语法详解Simple Example准备配置文件启动Flume Agent服务实例测试三、Flume的Compent详细使用SourceNetcatExec测试追加数据Spooling DirectoryAvro通过专用客户端测试KafkaChannelMemoryJDBC(不重要)KafkaFileSpillable MemorySinkL...原创 2019-11-25 14:05:55 · 263 阅读 · 0 评论 -
Habse集群的搭建
集群搭建HadoopNode01HadoopNode02HadoopNode03nn1nn2journal nodejournal nodejournal nodezkfczkfcdatanodedatanodedatanodezk01zk02zk03rm1rm2nodemanagernodemanagern...原创 2019-11-22 09:04:23 · 186 阅读 · 0 评论 -
ssh免密登陆配置
文章目录生成秘钥将秘钥copy之需要免密登陆的主机生成秘钥[root@flink01 ~]# ssh-keygen -t rsaGenerating public/private rsa key pair.Enter file in which to save the key (/root/.ssh/id_rsa):Enter passphrase (empty for no passp...原创 2019-11-21 19:51:14 · 278 阅读 · 0 评论 -
yum源
文章目录7.1 介绍7.2 yum源相关7.2.1 本地yum源(不能上网)7.2.2 远程yum源(能够访问外网)备份本地原有的源下载对应版本repo文件将下载好的对应版本的yum源文件放入/etc/yum.repos.d/文件中运行命令生成缓存7.2.3 阿里云源7.1 介绍yum,是Yellow dog Updater Modified的简称,起初是由yellow dog这一发行版的开发...原创 2019-11-21 19:29:48 · 124 阅读 · 0 评论