- 博客(6)
- 收藏
- 关注
RSS订阅原创 Flume监控软件——Ganglia安装与部署
一、Ganglia安装1.1 三台机器安装epel源[usr@node01 flume]$ sudo yum install -y epel-release[usr@node02 flume]$ sudo yum install -y epel-release[usr@node03 flume]$ sudo yum install -y epel-release1.2 在node01安装web,meta和monitor[usr@node01 flume]$ sudo
2022-03-19 19:16:51
3519
原创 Exception in thread “HiveServer2-Handler-Pool: Thread-67“ java.lang.OutOfMemoryError: Java heap spac
错误信息提示如下Exception in thread "HiveServer2-Handler-Pool: Thread-67" java.lang.OutOfMemoryError: Java heap space at java.util.Arrays.copyOf(Arrays.java:3332) at java.lang.AbstractStringBuilder.ensureCapacityInternal(AbstractStringBuilder.ja
2022-03-05 14:58:13
2950
原创 org.apache.hadoop.hive.ql.metadata.HiveException: Hive Runtime Error while processing row
建了个宽表，用到collect_list。在进行数据导入的时候报错。日志显示错误信息如下：Diagnostic Messages for this Task:java.lang.RuntimeException: org.apache.hadoop.hive.ql.metadata.HiveException: Hive Runtime Error while processing rowat org.apache.hadoop.hive.ql.exec.mr.ExecMapper.map..
2022-03-04 13:03:39
3087
原创 解决mysql中文乱码问题
解决mysql中文乱码问题主要是改下配置文件的问题。这里主要分享一下，要是改错了，如何发现问题所在。一开始我是按如下配置的接着就重启mysql服务systemctl stop mysqld.servicesystemctl start mysqld.service报错，重启不了mysql服务查看日志 -> var/log/mysqld.log，搜索ERROR关键字，查看错误源。发现有个地方配置配错了，在网上进行相对应查找，经对比，此配置项为无效配置项。经测试，去
2021-08-20 23:51:15
175
原创 Spark StructuredStreaming jar包添加
在spark-shell上运行spark structuredstreaming程序报如下错误，经排查发现是由于版本问题需添加多一些jar包。spark版本为3.0.0。我的代码spark.sparkContext.setLogLevel("ERROR") val df = spark.readStream.format("kafka") .option("kafka.bootstrap.servers","node01:9092")...
2021-08-20 20:17:35
479
原创 hive JDBC连接报错解决方案
在hadoop 的core-site.xml添加如下内容 然后重启<property> <name>hadoop.proxyuser.root.groups</name> <value>*</value> <description>Allow the superuser oozie to impersonate any members of the group group1 and group2</descri...
2021-07-21 22:10:46
987
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人