- 博客(1)
- 资源 (8)
- 收藏
- 关注
原创 国产时序数据库TDengines学习调研及总结
如果无法快速定位出异常原因,会造成更多的异常 glass,严重影响生产。当时的技术栈用的是CDH,首先通过kafka采集的数据, spark对接kafka进行初步计算去噪并汇总到hadoop里面,以parquet的格式保存,有需要进一步的加工,通过impala进行一步的加工,每天挂起N个任务,不停的调度计算。TDengine不需要对数据进行修改,所以不需要考虑数据一致性的问题,数据是以有序的规律并追加的形式写进去的,因为只有读和写,所以也不需要锁保护,抛掉一些无用的包袱,可以集中优化其它地方,例如列式表。
2022-12-22 11:52:46
1647
银行数据治理-phyd.pdf
从数据治理架构、数据管理、数据质量控制、数据价值实现、监督管理等方面规范银行业金融机构的数据管理活动。将数据治理提高到银行常规管理的战略高度,明确要将银行数据治理工作常态化、持久化,标志着我国银行业数据治理新时代的正式启幕。
2020-03-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人