- 博客(4)
- 收藏
- 关注
RSS订阅原创 spark3.3.2集成hudi同步hive表
假设我的spark安装目录为将hive-site.xml传入目录下根据你实际的spark版本和scala版本去找对应版本的jar包下载jar包链接: https://repo1.maven.org/maven2/org/apache/hudi/hudi-spark3.3-bundle_2.12/0.13.0/hudi-spark3.3-bundle_2.12-0.13.0.jar把hudi-spark3.3-bundle_2.12-0.13.0.jar传入目录下下载jar包链接: ht
2023-03-23 09:55:48
549
原创 Clickhouse搭建
Clickhouse搭建安装前准备/etc/security/limits.conf 、 /etc/security/limits.d/90-nproc.conf 在 这 2 个文件的末尾加入以下内容重启服务器之后生效，用 ulimit -n 或者 ulimit -a 查看设置结果CentOS 取消 SELINUX关闭防火墙安装依赖安装包下载将安装包上传至服务器安装启动 ClickServer使用 client 连接 server安装前准备/etc/security/limits.conf 、 /etc
2020-12-09 09:34:38
443
原创 SpringBoot 解决打出jar包中没有主清单属性
**在springboot编译插件 spring-boot-maven-plugin中添加完整打包信息**原因分析：在聚合项目中子项目引用了父项目的BOM编译插件，这个BOM代替了spring-boot-starter-parent这个parent POM（详见13.2.2. Using Spring Boot without the parent POM）导致spring-boot-maven-plugin的配置项丢失，使得打包后的jar中的MANIFEST.MF文件缺少Main-Class。
2020-05-27 13:14:11
712
原创 CDH中在用hue执行sqoop导入hive失败
CDH中在用hue执行sqoop导入hive失败原因解决原因在hue中使用sqoop editor讲mysql数据可以导出hdfs，但是导入hive失败。出现上述原因是oozie把数据导入hive时，查不了hive元数据。解决在hive-site.xml 添加属性：<property> <name>hive.metastore.uris</name> <value>thrift://sv2lxgsed01.xxxx.com:90
2020-05-15 11:10:17
713
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人