
kafka
阿泽财商会
作品主页https://mbd.pub/o/m/azcsh,高级人工智能算法训练工程师,人工智能应用工程师,高级工程师,高级信息系统项目管理师,软件设计师,CSM敏捷教练,csdn20周年直播嘉宾,高级健康管理师,会计师。
清华大学出版社《MongoDB游记》数据库教程书作者。专注于人工智能,数据挖掘技术与大数据,云计算与存储等技术的学习与研究。擅长人工智能算法训练,系统响应式开发、数据采集数据清洗和数据分析,分布式云存储运算等技术。熟悉后台系统、云存储计算平台的搭建,擅长解决架构过程中遇到的疑难问题。常用开发语言:java、python、c#、perl、sql。
展开
-
kafka全面介绍
转载请注明出处:kafka全面介绍简介-什么是kafkakafka 是用于收集多个来源的实时流程数据的分布式消息发布订阅系统,具有水平伸缩,高容错,速度快等特点。它最初由LinkedIn公司基于独特的设计实现为一个分布式的提交日志系统( a distributed commit log),,之后成为Apache项目的一部分。目前已经在成千上万家公司的生产环境中稳定运行。官网https://...原创 2018-10-22 19:01:04 · 902 阅读 · 0 评论 -
使用confluent本地安装和使用kafka
转载请注明出处:使用confluent本地安装和使用kafkaconfluent简介confluent是平台化的工具,封装了kafka,让我们可以更方便的安装和使用监控kafka,作用类似于CDH对于Hadoop。confluent是由LinkedIn开发出Apache Kafka的团队成员,基于这项技术创立了新公司Confluent,Confluent的产品也是围绕着Kafka做的。基本架...原创 2018-10-26 18:37:34 · 19255 阅读 · 5 评论 -
CentOS7安装和使用kafka
转载请注明出处 :CentOS7安装和使用kafka环境准备安装kafka之前我们需要做一些环境的准备1、centOS7系统环境2、jdk环境3、可用的zookeeper集群服务安装jdk参考文章linux软件(一)—CentOS安装jdk安装Kafka从官网下载Kafka 安装包,解压安装:tar zxvf kafka_2.11-2.0.0.tgz mv kafka_2....原创 2018-10-24 18:21:31 · 15228 阅读 · 6 评论 -
kafka客户端实现---java版本
转载请注明出处:kafka客户端java版本下载jar包maven版本的直接找到相关的pom配置即可。https://mvnrepository.com/artifact/org.apache.kafka/kafka-clients/2.0.0我们这里使用的是2.0.0版本如下:<!-- https://mvnrepository.com/artifact/org.apache....原创 2018-10-30 19:14:31 · 19882 阅读 · 6 评论 -
遇到问题--python--kafka--阿里云--ValueError: attempt to connect already-connected SSLSocket
情况使用kafka-python连接阿里云的kafka服务,使用代码如下:import osimport socketimport jsonimport sslfrom kafka import KafkaProducerfrom illumina_qc_module.log import loggerimport timefrom datetime import date...原创 2019-06-12 15:27:40 · 1289 阅读 · 0 评论 -
Springboot集成使用阿里云kafka详细步骤
转载请注明出处:Springboot集成使用阿里云kafka详细步骤明确连接认证类型首先要明确使用哪种连接认证类型Ons模式参考https://github.com/AliwareMQ/aliware-kafka-demos/tree/master/kafka-java-demo/betaOns模式的conf内容KafkaClient { com.aliyun.open...原创 2019-03-29 15:56:23 · 9729 阅读 · 1 评论 -
python的kafka客户端
python连接kafka的标准库比较流行的有1、kafka-python2、pykafkakafka-python使用的人多是比较成熟的库,pykafka是Samsa的升级版本,使用samsa连接zookeeper然后使用kafka Cluster。区别:pykafka的对zookeeper支持而kafka-python并没有zk的支持kafka-python使用操作文档htt...原创 2019-06-11 18:28:17 · 10448 阅读 · 1 评论