
大数据
javaee_sunny
知行合一.
展开
-
Centos7上安装Git
Git是一个开源的分布式版本控制系统,可以有效、高速的处理从很小到非常大的项目版本管理。而国外的GitHub和国内的Coding都是项目的托管平台。但是在使用Git工具的时候,第一步要学会如何安装git,本教程就手把手教大家如何手动编译安装git。1. 介绍使用Coding管理项目,上面要求使用的git版本为1.8.0以上,而很多yum源上自动安装的git版本为1.7,所以需要掌握手动编译安装gi...原创 2018-05-25 12:46:10 · 6889 阅读 · 0 评论 -
Hadoop-Hbase基础操作命令
1. 创建表create 'music_table','meta_data','action'2. 查询表列表list3. 查看表的具体描述describe 'music_table'4. 禁用表disable 'music_table'5. 激活表enable 'music_table'6. 查看表是否被激活is_enabled 'music_table' 7. 删除表(删除表之前,必须要先禁用...原创 2018-05-20 19:31:22 · 465 阅读 · 0 评论 -
Hadoop-Hbase环境搭建
一. 初始环境1. hadoop : hadoop-1.2.12. java : jdk1.6.0_453. hbase : hbase-0.98.24-hadoop1二. 启动hadoophadoop安装目录: /usr/local/src/hbase-0.98.24-hadoop11. 格式化hadoop集群hadoop namenode -format2.启动集群start-all.sh3....原创 2018-05-20 19:22:48 · 618 阅读 · 0 评论 -
linux关闭防火墙(临时/永久)
1. 首先查看防火墙状态:service iptables status2. 永久性生效,重启后不会复原开启:chkconfig iptables on# 永久关闭: chkconfig iptables off# 检查: chkconfig --list iptables3. 即时生效,重启后复原开启:service iptables start关闭:service iptables stop4...原创 2018-05-20 18:21:29 · 9303 阅读 · 0 评论 -
Centos6.5设置静态IP并能进行联网
工具说明:VMwarecentos 6.5必备知识点:配置文件存放位置: /etc/sysconfig/network-scripts/host设置位置: /etc/hosts重启网络: service network restart测试网络: ping www.baidu.com第一步: VMware开启后,我们点击头部菜单中的“编辑”,在下拉菜单中点击“虚拟网络编辑器(N)...”,如下图所...原创 2018-05-20 18:05:38 · 4821 阅读 · 1 评论 -
Hadoop-模拟搭建日志收集系统
一. 技术点梳理Nginx:其实一个web server,此流程中做反向代理,起到分发用户请求的作用,在集群环境时,也可以用它实现负载均衡;Spawn cgi:提供一个cgi网关接口,可以将server服务,快速的暴露出去以便对外提供服务,对外提供的服务走fcgi协议,fcgi协议是一种特殊的http请求,而http请求安全性相对差一些,因为容易受到外部的攻击;Thrift RPC: 通过执行th...原创 2018-05-15 13:01:31 · 5352 阅读 · 2 评论 -
Hadoop-模拟搭建用户行为日志采集系统分析
一. kafka应用流程示意流程图前端js埋点,就是调用后端提供的对应的接口.例如:http://pingserver.com?itemid=111&userid=110&action=show&...flume监听log日志,将实时增加的log日志通过flume管道注入kafka中,接下来可以有storm或spark streaming进行实时计算;方向(1)中应用:s...原创 2018-05-11 06:47:48 · 3011 阅读 · 0 评论