TO BE OR NOT TO BE

XMLWriter write=null;   SAXReader reader =new SAXReader();      OutputFormat format =OutputFormat.createPrettyPrint();   format.setEncoding("GBK");      String filePath="d:\\Server.xml";   File

日志实时分析系统（单机） 本次教程的主要目的是利用flume采集Apache的access.log数据通过kafka消息订阅服务转发至日志分析程序，其中需要的环境包括：linux系统，Java JDK,zookeeper,flume,kafka,接收数据的程序java程序。 一准备环境 软件下载 软件的下载 wget http://www.apache.org/dist/zookeeper/...

项目需要对企业的业务访问流量进行大数据分析，由于使用Kafka+flume采集数据，接收到的数据是单条的所以需要组装切割再筛选所需要的数据。 正则初级入门 正则表达式(Regular Expression)是一种文本模式，包括普通字符（例如，a 到 z 之间的字母）和特殊字符（称为"元字符"）。正则表达式使用单个字符串来描述、匹配一系列匹配某个句法规则的字符串。正则表达式是繁琐的，但它是强大的，...

在实现flume采集数据并使用kafka传输数据后发现数据是以明文传输的，对于安全性要求较高的系统来说是不可取的，故使用flume可扩展的自定义拦截功能来将数据过滤和加密本文主要讲加密过滤的部分依据实际的需要来增加，拦截器使用maven项目实现。有疑问可以参考上篇日志（此处需要采集初始机制搭建完成） — {% post_link 日志分析系统(zookeeper+flume+kafka)之实时接收...