数据技术控

1、下载:http://kafka.apache.org/2、安装步骤:http://kafka.apache.org/documentation.html#quickstart没有按照上面的步骤执行./sbt修改 conf/server.propertieszookeeper.connect=192.168.27.101:2181broke

参考http://blog.linezing.com/2013/01/how-to-install-and-deploy-storm-cluster?spm=0.0.0.0.fQmOrE仅仅做个记录，其实上面博客已经写的很详细，只是其中部分更简化了些1、JZMQ的安装该步骤又要安装git,还得线上clone,由于公司网速不给力，折腾了半天，最后进入https://github.

转载自：[翻译][Trident] Storm Trident 教程英文原址：https://github.com/nathanmarz/storm/wiki/Trident-tutorial----------------Trident是在storm基础上，一个以realtime 计算为目标的高度抽象。 它在提供处理大吞吐量数据能力的同时，也提供了低延时分布式查询和有状态

介绍实现了一个简单的从实时日志文件监听，写入socket服务器，再接入Storm计算的一个流程。源码日志监听实时写入socket服务器package socket;import java.io.BufferedReader;import java.io.File; import java.io.IOException; import java.io

目的实时监听某目录下的日志文件，如有新文件切换到新文件，并同步写入kafka，同时记录日志文件的行位置，以应对进程异常退出，能从上次的文件位置开始读取（考虑到效率，这里是每100条记一次，可调整)源码:import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File;import

目的实时监听多个目录下的日志文件，如有新文件切换到新文件，并同步写入kafka，同时记录日志文件的行位置，以应对进程异常退出，能从上次的文件位置开始读取（考虑到效率，这里是每100条记一次，可调整)源码import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File; impo

1、What——JStorm是什么？　概述：　　JStorm 是一个分布式实时计算引擎，类似Hadoop MapReduce的系统， 用户按照规定的编程规范实现一个任务，然后将这个任务递交给JStorm系统，Jstorm将这个任务跑起来，并且按7 * 24小时运行起来，一旦中间一个worker 发生意外故障， 调度器立即分配一个新的worker替换这个失效的worker。因此，从应用的角度，JSt...