【查看目录】hdfs dfs -ls /【创建目录】hdfs dfs -mkdir /dgs-ec-gm【修改目录权限】hdfs dfs -chmod 777 /dgs-ec-gm【查看存储内容】#查看分片hdfs dfs -ls /dgs-ec-gm/dgs_ec_gm_20210806/593971679891456/20210806#查看分片中的内容，前几行hdfs dfs -cat /dgs-ec-gm/dgs_ec_gm_20210806/5939716

从下面连接下载版本2.7.3https://archive.apache.org/dist/hadoop/common/

一、什么是ClickHouseClickhouse是由俄国Yandex在2016年发布的一个分布式数据分析型数据库，其效率要比Veritca快约5倍，其不依赖于Hadoop生态软件和基础及高可用的特性适用于许多数据分析场景特性:1.数据压缩在一些列式数据库管理系统中(例如：InfiniDB CE 和 MonetDB) 并没有使用数据压缩。但是, 若想达到比较优异的性能，数据压缩确实起到了至关重要的作用。2.数据的磁盘存储许多的列式数据库(如 SAP HANA, Google PowerDr

Kafka组件主要负责消息从"采集到解析"，"解析到存储"这两个关键过程的数据缓冲，避免数据丢失。一、安装前准备下载安装包kafka_2.11-2.2.1.tgz，并解压tar -zxvf kafka_2.11-2.2.1.tgz创建一个非root用户useradd username01passwd username01关闭防火墙systemctl disable firewalldsystemctl stop firewalld...

ZooKeeper组件为系统的分布式集群(如Kafka消息队列)提供仲裁协调服务。一.下载zookeeper-3.4.14.tar.gz，并解压tar -zxvf zookeeper-3.4.14.tar.gz二.配置进入conf文件，拷贝zoo_sample.cfg为zoo.cfg，并对zoo.cfg文件进行配置：dataDir=/home/data/zkdatadataLogDir=/home/data/zklogserver.1=192.168.32.21:2888:388