小小码农的博客

springboot查询clickhouse

mysql 连接：首先确认mysql的版本：执行查询语句select version();maven中配置mysql连接： <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>8.0.21</v

常用hive语句，以及一些简单的函数使用方法

1.数据倾斜：最简单的做法:在sql中使用随机数distribute by rand()在sql 末尾加select * from a left join b on a.xx=b.xx distribute by rand()2.spark.dynamicAllocation.enabled=true开启动态资源分配3.提高并行度spark.sql.shuffle.partitions=1000 ，调整stage的并行度，也就是每个stage的task个数，默认值...