大数据常见命令汇总ING....

最新推荐文章于 2024-05-01 03:10:59 发布

原创最新推荐文章于 2024-05-01 03:10:59 发布 · 528 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#大数据常见命令 #kafka #hdfs #yarn #zookeeper

hadoop 专栏收录该内容

47 篇文章

订阅专栏

本文详细介绍了一系列大数据组件的启动过程及基本操作，包括HDFS、YARN、Hive、Zookeeper、Kafka等，涵盖了从集群搭建到数据导入、消费的全流程。适合初学者快速上手和参考。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1/hdfs 启动
   start-dfs.sh
2/yarn 启动
   start-yarn.sh
3/hive 启动
   hive
4/hive 创建表
   create table users(id int, name string) row format delimited fields terminated by '/t';
5/hive 导入数据
   load data local inpath '/home/hadoop/users.txt' into table users;
6/zk 启动
   zkServer.sh start
7/zk 查看状态
   zkServer.sh status
8/kafka 启动
   nohup bin/kafka-server-start.sh config/server.properties &
   创建一个topic
   bin/kafka-topics.sh --zookeeper 192.168.2.205:2181,192.168.2.206:2181,192.168.2.207:2181 --topic TestTopic --replication-factor 1 --partitions 1 --create
   创建一个生产者
   bin/kafka-console-producer.sh --broker-list 192.168.2.205:9092,192.168.2.206:9092,192.168.2.207:9092 --topic TestTopic
   创建一个消费者
   bin/kafka-console-consumer.sh --zookeeper 192.168.2.205:2181,192.168.2.206:2181,192.168.2.207:2181 --topic TestTopic --from-beginning