python消费kafka数据,手动提交,并将数据批量存入elasticsearch
最近工作需要,要用到kafka和elasticsearch,研究了不少文档,总算总结了一套自己的工具,消费kafka数据存入elasticsearch一、第三方包选择pip install kafka,对比了kafka和pykafka,还是选择kafka,消费速度更快pip install elasticsearch二、创建es连接对象es的index创建这里就不写了from elasticsearch import Elasticsearchfrom elasticsearch.helper
原创
2020-05-21 17:49:11 ·
3076 阅读 ·
0 评论