laomei

好久没写博客了，做了一段时间的日志采集和流处理，总结一下自己的工作吧。本人只涉及了日志埋点流处理，监控系统相关的内容不在本文，我也没有涉及到。 很有幸的是，在大数据前我负责了内部 debezium 相关的维护开发，所以本文也会介绍一下实时数据库变更流相关的内容。 目录概述日志采集端几个问题解决问题其它日志处理日志拆分埋点日志处理其它数据库变更流采集实时计算平台其它 概述 下图是目前我经手的整个实时...

生活 今天是2018年的最后一天，回顾今年一整年，有太多的感慨。 2018年对我来说是非常特别的一年。今年我毕业了~~，从原来的实习生转正为正式员工，一个非常大的转变。从校园到社会，真的感觉眨眼之间。算了balabala...不说了。 技术 2018成功的给debezium提了个pr，啊哈哈。感觉社区的2个维护者还是很友好的，给了我一些建议~~。 在公司我曾经是debezium kafka系统的维...