长胖的wo一定特美的博客

JMS是什么??JMS是java提供的一套技术规范 JMS用来异构系统,集成通信,缓解系统瓶颈,提高系统的伸缩性增强系统用户体验,使得系统模块化和组件化变得可行并更加灵活 通过 生产消费者模式(生产者,服务器,消费者)的方式JMS消息传输模型: 点对点模式: 一对一,消费者主动拉取数据,消费收到后消息清除 特点:发送到队列的消息被一个且只有一个接收者接收处理发布/订阅模式:

你所不知道的消息(Message): StreamMessage: java数据流信息,用标准流操作来顺序的填充和读取 MapMessage:一个Map类型的消息,名称为string类型,而值为java的基本类型 TextMessage:普通字符串消息,包含一个String ObjectMessage:对象消息,包含一个可序列化的java对象 Byt

kafka集群部署的基本流程: 下载安装包,解压安装包,修改配置文件,分发安装包,启动集群1.下载安装包 http://kafka.apache.org/downloads.html2.解压安装包 tar -zxvf /usr/local/kafka_2.11-0.9.0.1.tgz //对包名进行修改 mv ./kafka_2

查看当前服务器中的所有topic cd /usr/local/kafka/bin ./kafka-topics.sh –list –zookeeper minimaster:2181创建topic ./kafka-topics.sh –create –zookeeper minimaster:2181 –replication-factor 1 –partitions 1 –topic tes

Kafka是什么?? 在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算Kafka是一个分布式消息队列:生产者,消费者的功能;它提供了类似于JMS的特性,但是在设计实现上完全不同 我只是小小的知识点–JMSKafka对消息保存时根据Topic进行归类,发送消息者称为Producer,消息接受者称为Consumer; kafka集群有多个ka

什么是Spark Streaming?? 用于流式数据的处理,具有高吞吐量和容错能力强等的特点SparkStreaming: 是一个可扩展的,高吞吐量,实时的流式处理 可以和多个数据源进行整合 将数据流分批次的进行处理,每一个批次就是一个时间段 DStream是一个离散流,是SparkStreaming的基本数据抽象,它由连续的RDD构成 DStream之间是有依赖关系的什么是