本文展示了如何使用MySQL数据库结合kettle进行数据处理，并通过PowBI实现数据可视化报表的实时更新。首先，介绍了数据库结构，包括tb表的状态管理和test1-test3的数据流程。然后，详细描述了kettle作业的配置和定时更新机制，以及当test1表数据变化时，如何自动反映到test3表并在PowBI中看到图表更新。作者期望与数据分析爱好者交流业务和技术，分享经验。
直接上图
本地搭建mysql数据库
tb——记录状态信息，增量数据更新时间，error记录数据报错时间，status字段用于判断是否处于更新状态
test1——原始数据
test2——TEST1数据经清洗后入test2
test3——test2表选取字段，做插入更新操作 （此处做FRM模型（后续连python，计算FRM分值，或聚类分析），对TEST2表做了操作，更新到表test3，RFM模型的字段则直接在test3中获取）
kettle作业流程（设置10秒更新，kettle设置状态发图有点多，需要的私聊）
最低0.47元/天 解锁文章
扫一扫
1890
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
