Kudu同步数据到mysql实施方案
- 简介
目前kudu导出到mysql没有比较好的方案,临时借助spark-sql进行数据导出,处理逻辑是会把老的数据给删除再导入,已经完成了生产环境的上线。
需要传入的参数程序参数
参数序号 |
字段含义 |
备注 |
1 |
同步的source表(含schema),必选 |
eg:yjp_crm.dm_bizuser_dealorderflag |
2 |
同步的target表(含schema),必选 |
eg:yjp_warehouse.dm_bizuser_lastmonthdeal |