SuperHeroX的博客

1.flink接入kafka Sink引入pom文件 <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-connector-kafka-0.11_2.11</artifactId> <version>1.7.2</version>

环境准备centos 5.7jdk1.8flink1.7前期准备首先要把centos7系统自带的openjdk卸载干净rpm -qa | grep javarpm -e --nodeps java-1.7.0-openjdk-1.7.0.51-2.4.5.5.el7.x86_64然后，安装jdk1.8配置环境变量把三个ip地址配置的hosts文件中配置flink修改flink/conf/flink-conf.yaml(3台都需要修改，修改为主机的ip地址

1.Nifi介绍Apache NiFi 是一个易于使用、功能强大而且可靠的数据拉取、数据处理和分发系统，用于自动化管理系统间的数据流。 它支持高度可配置的指示图的数据路由、转换和系统中介逻辑，支持从多种数据源动态拉取数据。 NiFi原来是NSA(National Security Agency [美国国家安全局])的一个项目，目前已经代码开源，是Apache基金会的顶级项目之一 NiFi基于Web方式工作，后台在服务器上进行调度。 用户可以为数据处理定义为一个流程，然后进行处理，后台具有数据处理

一、环境准备：需要的小伙伴联系博主，私信邮箱1556554374@qq.com1.本人集群搭建的ip地址三台分别为192.168.1.171~173(三台机器都要执行)分别修改主机名为cdh1、cdh2、cdh3(如vim没有安装，自行使用命令 yum install vim)vim /etc/hostname分别修改hosts文件vim /etc/hosts编辑完之后分别重启三台机器2.卸载OpenJDK（所有机器都要执行）输入命令查看是否有...

1.主从复制:mysql数据库提供了一种主从备份的机制，其实就是把主数据库的所有的数据同时写到备份的数据库中。实现mysql数据库的热备份。要想实现双机的热备，首先要了解主从数据库服务器的版本的需求。要实现热备mysql的版本都高于3.2。还有一个基本的原则就是作为从数据库的数据版本可以高于主服务器数据库的版本，但是不可以低于主服务器的数据库版本。当然要实现mysql双机热备，除了my...

Ambari简介Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sq...