Toroidals
不患人之不能,而患己之不勉
展开
-
clickhouse:01 clickhouse union all之后数据量不一致
问题:clickhouse使用union all查询结果与每一段sql查询结果只和不一致。原因:因为clickhouse版本问题,官方给出不同的解释。解决方案:将union all的每一段sql用括号括起来。clickhouse版本:22.8.16.32。原创 2023-09-15 16:36:17 · 1084 阅读 · 0 评论 -
hudi:03 Spark集成hudi创建表报错
org.apache.hudi.exception.HoodieException: 'path' or 'Key: 'hoodie.datasource.read.paths' , default: null description: Comma separated list of file paths to read within a Hudi table. since version: version is not defined deprecated after: version is not de原创 2023-09-14 11:33:50 · 872 阅读 · 0 评论 -
Flink、Spark、Hive集成Hudi 1.0.1详细教程
版本:0.13.1版本:flink-1.15.2spark版本:3.3.2Hive版本:3.1.3Hadoop版本:3.3.4。原创 2023-09-14 09:46:19 · 913 阅读 · 0 评论 -
Flink-cdc报错整理oracle、mysql、OceanBase、kingbase(附详细代码)
解决方案:移除flink lib下jar包:flink-table-planner-loader-1.15.2.jar。解决方案:flink lib下添加jar包:flink-table-planner_2.12-1.15.2.jar。原创 2023-06-27 22:06:28 · 1524 阅读 · 0 评论 -
ORA-28040和ORA-01017 的解决方法
oracle18c 数据库已经发布,在安装Oracle 18c数据库之后,客户端目前一般还是停留在10G、11G,如果客户端工具的版本是toad、plsql在连接12c、18c就会报如下两个错误:ORA-28040: No matching authentication protocolORA-01017: invalid username/password; logon denied...原创 2019-08-28 17:59:23 · 5766 阅读 · 1 评论 -
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask:28:27
调用hive查询数据时报错原因:job太大集群资源不够 hdfs目录全不够,执行sql的时候需要创建目录 引擎故障:tez引擎不行解决方案:job太大集群资源不够 1.我是多个任务一起运行导致的资源不足,等待其他任务结束,重启启动任务,问题解决hdfs目录全不够,执行sql的时候需要创建目录 2.hdfs目录赋权给执行sql用户引擎故障 ...原创 2018-08-24 14:38:34 · 14448 阅读 · 3 评论 -
ERROR DiskBlockObjectWriter: Uncaught exception while reverting partial writes to file /tmp 设备上没有空间
spark-submit提交任务时报错:ERRORDiskBlockObjectWriter:Uncaughtexceptionwhilerevertingpartialwritestofile/tmp/blockmgr-66dd8b05-fb0f-4607-9efd-22c1bb75bace/3f/temp_shuffle_73cf6031-fc6a-4f5f-96...原创 2019-03-20 16:47:24 · 3225 阅读 · 0 评论 -
IDEA报错找不到或者无法加载主类以及控制台乱码Maven项目运行极慢等问题终极解决方案
问题1:错误:找不到或无法加载主类 com.xxx解决方案有两个:第一个方案(推荐):勾选 Store generated project files externally第二个方案(不推荐):勾选 Delegate IDE build/run actions to Maven为什么不推荐了呢,原因有两个点:第一个原因,勾选 Delegate IDE build/run actions to Maven 会导致项目测试运行极慢,因为每次都会走maven去clean-packa原创 2021-01-28 15:49:46 · 654 阅读 · 1 评论 -
java 通过zookeeper连接hiveserver2报错:org.apache.hive.jdbc.ZooKeeperHiveClientException: Unable to read Hi
环境: hive驱动版本:1.2.1通过以下连接方式,通过hiveserver2 urljdbc:hive2://prddn01.com:10000/;principal=hive/prddn01.com@SC.COM 连接hiveserver2完全正确,但是换成zookeeper url就报错:package com.asiainfo;import java.io.IOException;import java.sql.Connection;import java.sql.Drive..原创 2020-06-02 21:27:46 · 13837 阅读 · 10 评论