yown的专栏

需求：及时得到线上用户访问日志分析统计结果，以便给开发、测试、运维、运营人员提供决策！找了各种工具，最终还是觉得goaccess不仅图文并茂，而且速度快，每秒8W 的日志记录解析速度，websocket10秒刷新统计数据，站大巨人肩膀上你也会看得更远…先上图： 具体方案如下步骤： 一、linux上安装goaccess（版本 1.1.1，一般安装在nginx所在机器上的/opt目录） a

大数据定义与5V特征： “大数据”（Big data）研究机构Gartner定义：是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。 大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。大数据国内发展历程：2015年9月，国务院印

大数据实时处理平台市市场上产品众多，本文着重讨论spark与storm的比对，最后结合场景进行选型。主要内容：一、spark与storm的比较二、应用场景分析

时下，大数据概念非常火热，相关处理技术也在各行各业中应用开来，并开始展露头角：如我国已建成的国家级大数据中心，在证券行业兴起的云投顾、交易所大数据监察等等。那作为一名技术人员，如何紧跟发展趋势，学习并掌握大数据处理技术呢? 本文将主要介绍什么是大数据及特点、发展历程、Hadoop简介、着重讲解Spark特点、体系结构、生态 、学习路线。（后续将陆续推出实战进阶内容，敬请期待）一、何为“大数据”? 有