- 博客(4)
- 收藏
- 关注
RSS订阅转载 基于flume的日志系统
思路 日志统一输出至kafka flume agent充当kafka消费者,将日志输出至elasticsearch kibana负责展示日志信息 准备工作 flume 1.8 kafka 1.1.0 elasticsearch&kibana 6.5.4 项目中一般使用log4j等日志框架，需自定义JsonLayout flume支持的elasticsearch较低，需自定...
2019-01-12 22:24:00
163
转载 flume安装及示例
关于Flume flume的宗旨是向hadoop批量导入基于事件的海量数据。一个典型的例子是利用flume从一组web服务器中收集日志文件，然后将日志文件中的日志事件保存至HDFS，以便进行具体的分析。 flume基本构件source-channel-sink，使用flume需先运行flume agent。flume agent由持续运行的source、sink以及channel构成的j...
2018-12-30 12:28:00
121
转载 认识Hadoop
Hadoop模块介绍 Hadoop Common 提供基础设施 Hadoop HDFS 分布式文件系统 Hadoop MapReduce 分布式离线并行计算框架 Hadoop YARN 任务调度与资源管理 HDFS 文件系统 + block块管理 分布式文件系统 组件如下 NameNode 主节点，存储文件的元数据（文件名，文件目录...
2018-11-07 21:19:00
75
转载 平台将其商业计划书伊妹儿给我并电话
日前某海产品O2O电子商务平台将其商业计划书伊妹儿给我并电话Call我"赶紧浏览"是否有意向,想让我进行投资或者介绍朋友投资.当我打开他们给我的商业计划书看到"与淘宝、天猫、当当、京东等C2C、B2B2C平台竞争"的字样,立马没有看下去的信心了. 原因在于这样的竞争是红海竞争,即便血流成河后来者也很难超越他们,这样的创业模式不外乎后浪推前浪,后浪死在沙滩上,这样的项目投入300万肯定是烧钱,
2014-06-20 15:59:38
320
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人