weixin_40782143的博客

Ubuntu18.04 部署Flink1. Flink 安装1.1 安装Flink1.2 配置Flink1.2.1 配置 flink-conf.yaml1.2.2 配置 slaves1.2.4 配置 master2.1 启动Flink1. Flink 安装下载地址：https://flink.apache.org/downloads.html1.1 安装Flink解压 hbase-2.1...

Ubuntu18.04 安装Spark集群1. Spark集群安装1.1 安装Spark1.2 配置Spark1.2.1 配置spark-env.sh1.2.2 配置 slaves1.2.3 将上述所有文件复制一份到各节点1.2.4 启动Spark集群1. Spark集群安装下载地址：http://spark.apache.org/downloads.html1.1 安装Spark进入/...

Ubuntu18.04 安装Hadoop集群1. Hadoop集群安装1.1 安装Spark1.2 配置Hadoop1.2.1 配置 hadoop-env.sh1.2.2 配置 yarn-env.sh1.2.3 配置 core-site.xml1.2.4 配置 hdfs-site.xml1.2.5 配置 mapred-site.xml1.2.6 配置yarn-site.xml1.2.7 配置s...

Ubuntu18.04 安装Hive1. Hive 安装1.1 安装Hive1.2 配置Hive1.2.1 配置 hive-site.xml1.2.2 添加mysql 驱动包1.2.3 格式化元数据（初始化）1.3 启动Hive1. Hive 安装下载地址：http://hive.apache.org/downloads.html1.1 安装Hive解压 apache-hive-2.3....

Ubuntu18.04 Zookeeper集群部署1. Zookeeper 安装1.1 安装Zookeeper1.2 配置Zookeeper1.2.1 配置 zoo.cfg1.2.2 将上述所有文件复制一份到各节点1.2.3 配置myPid1.2.4 编写批量启动脚本(zk-Cluster.sh)1.3 启动 Zookeeper1. Zookeeper 安装下载地址：http://zook...

Ubuntu18.04 Kafka配置1. Kafka 安装1.1 安装Kafka1.2 配置Kafka1.2.1 配置 server.properties1.2.2 编写批量启动程序(kafka-Cluster.sh)1.3 启动Kafka1. Kafka 安装下载地址：http://kafka.apache.org/downloads1.1 安装Kafka解压 kafka_2.11-...

Spark RDD 持久化方式1. Cachecache调用persist，缓存级别为MEMORY_ONLY /** * Persist this RDD with the default storage level (`MEMORY_ONLY`). */ def persist(): this.type = persist(StorageLevel.MEMORY_ONLY...

Ubuntu18.04 部署Hbase1. Hbase 安装1.1 安装Hbase1.2 配置Hbase1.2.2 配置 hbase-env.sh1.2.3 配置 hbase-site.xml1.2.4 配置 regionservers2.1 启动Hbase1. Hbase 安装下载地址：http://hbase.apache.org/downloads.html1.1 安装Hbase解...