- 博客(6)
- 收藏
- 关注
RSS订阅转载 hive的hiveserver2配置及问题
前题hive跑起来了，再继续下面步骤～文件修改1.配置hive-site.xml切换到hive的conf目录下，打开hive-site.xml文件cd /Users/zhaohaichao/programming/hive-1.1.0-cdh5.15.1/confvi hive-site.xml添加以下配置<property> <name>hive.server2.authentication</name> <val
2021-09-02 16:29:18
6113
2
原创 关于spark-shell 程序执行中 net.jpountz.lz4.LZ4BlockInputStream.<init>(Ljava/io/InputStream;Z)V 问题
今天在用spark-shell测试的时候，发现报了这个错误，怎么也没想明白是什么原因。可能是spark默认使用的压缩方式是lz4的，但是jar包又不缺，所以没有弄懂，后续弄懂了再来修改博客目前的解决方案：将压缩方式改成snappy，这样就不报错了，暂时能用./spark-shell --master local[2] --conf spark.io.compression....
2020-03-10 18:57:45
1257
原创 Kafka安装部署 for Mac or Linux
Kafka官网http://kafka.apache.org/我所使用的版本是kafka_2.11-0.9.0.0下载地址为https://archive.apache.org/dist/kafka/0.9.0.0/kafka_2.11-0.9.0.0.tgz以下是单节点部署1）解压解压到指定文件夹tar -zxvf kafka_2.11-0.9.0.0.tgz -C ...
2020-02-17 19:50:44
295
原创 Zookeeper安装部署 for Mac or Linux
Zookeeper官网http://zookeeper.apache.org/我所使用的版本是zookeeper-3.4.5-cdh5.15.1CDH版下载地址为http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.15.1.tar.gz注意：http://archive.cloudera.com/cdh5/cd...
2020-02-17 18:48:09
190
原创 Flume安装部署 for Mac or Linux
最近学习到Flume，记录一下部署过程，以便后续使用Flume官网http://flume.apache.org/我所使用的版本是flume-ng-1.6.0-cdh5.15.1 下载地址为http://archive.cloudera.com/cdh5/cdh/5/flume-ng-1.6.0-cdh5.15.1.tar.gz1）前置条件 Java运行时环境-Jav...
2020-02-17 13:04:23
440
原创 JDK安装部署 for Mac or Linux
1）下载下载JDKhttps://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html根据自己的系统，下载相应的版本我这里使用的是jdk-8u161-linux-x64.tar.gz2）解压解压到指定文件夹tar -zxvfjdk-8u161-linux-x64.tar.gz -C ~/...
2020-02-17 12:11:57
914
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人