前言
最近在使用waterdrop读取hive的数据,并写入clickhouse。但是hive是按照天来分区的,所以同步数据的时候需要动态的选择分区。但是waterdrop的配置文件是conf文件,没法动态赋值。特此记录一下这个解决办法。
解决办法
我们可以使用cat <<!EOF把变量传进去,并且把脚本生成在文件夹中,然后再使用waterdrop的命令调用即可。demo如下:
#!/bin/bash
# 日期及参数配置输入,默认当天无参数输入
if [ $# == 0 ];then
daydate=`date +%Y-%m-%d`
elif [ $# == 1 ];then
daydate=$1
else<