
生态架构
javaee_sunny
知行合一.
展开
-
Hadoop-Hbase基础操作命令
1. 创建表create 'music_table','meta_data','action'2. 查询表列表list3. 查看表的具体描述describe 'music_table'4. 禁用表disable 'music_table'5. 激活表enable 'music_table'6. 查看表是否被激活is_enabled 'music_table' 7. 删除表(删除表之前,必须要先禁用...原创 2018-05-20 19:31:22 · 465 阅读 · 0 评论 -
Hadoop-Hbase环境搭建
一. 初始环境1. hadoop : hadoop-1.2.12. java : jdk1.6.0_453. hbase : hbase-0.98.24-hadoop1二. 启动hadoophadoop安装目录: /usr/local/src/hbase-0.98.24-hadoop11. 格式化hadoop集群hadoop namenode -format2.启动集群start-all.sh3....原创 2018-05-20 19:22:48 · 618 阅读 · 0 评论 -
Hadoop-模拟搭建日志收集系统
一. 技术点梳理Nginx:其实一个web server,此流程中做反向代理,起到分发用户请求的作用,在集群环境时,也可以用它实现负载均衡;Spawn cgi:提供一个cgi网关接口,可以将server服务,快速的暴露出去以便对外提供服务,对外提供的服务走fcgi协议,fcgi协议是一种特殊的http请求,而http请求安全性相对差一些,因为容易受到外部的攻击;Thrift RPC: 通过执行th...原创 2018-05-15 13:01:31 · 5352 阅读 · 2 评论 -
Hadoop-模拟搭建用户行为日志采集系统分析
一. kafka应用流程示意流程图前端js埋点,就是调用后端提供的对应的接口.例如:http://pingserver.com?itemid=111&userid=110&action=show&...flume监听log日志,将实时增加的log日志通过flume管道注入kafka中,接下来可以有storm或spark streaming进行实时计算;方向(1)中应用:s...原创 2018-05-11 06:47:48 · 3011 阅读 · 0 评论