scugxl的专栏

背景 公司在重度使用aws的ECS 功能。 ECS 简单来说就是亚马逊版本的docker服务。最近aws默认的cloudwatch free-tier已经超过限制了。 所以就想自己搭建日志平台。 大致平台如下： 因为公司的使用了各种语言python nodejs java和各种开源软件服务比如airflow而我们需要解决的就是：对各种服务的日志如何快速统一的收集到我们的平台之中。 调查发现后， aws实际上提供了一个服务：aws firelens 可以用于快速的将日志转发到其他地方， 比如splunk。

工作中经常用到kafka，为了方便需要一个docker版的kafka， 有人问为啥不是原生的？ 原生的每次要自己手动启动zk和kafka（新版只需要kafka）。 那为啥不用k8s的呢？k8s本身比较zhan'y