- 博客(18)
- 收藏
- 关注
原创 Flume安装&以及常用的代理配置
第一部分 单节点flume配置安装参考http://flume.apache.org/FlumeUserGuide.htmlhttp://my.oschina.net/leejun2005/blog/288136 这边简单的介绍,运行agent的命令 $ bin/flume-ng agent -n $agent_name -c conf-f conf/flume-con
2016-03-17 12:35:02
1325
原创 Ambari安装
什么是Ambari?Ambari旨在通过快速部署、管理、监控来使得管理Hadoop集群更简单。Ambari依靠它的资源APIS提供一个直观的、方便使用的Hadoop web管理 UI。功能:一:部署Hadoop集群 1:提供手把手的向导来安装hadoop服务在任意数量的host 2:为集群操控Hadoop服务配置二:管理Hadoop集群
2016-03-17 12:30:21
543
原创 ETK-logstash客户端快速部署
前言 本文档旨在指导快速部署Logstash客户端服务。搜集日志并最终在Kibana上可视化展示。 在部署之前,请确认你的项目工程中,log4j的配置是如下这样的:*必须保证输出的格式相同。 LogStashClient安装部分 Setp 1 解压解压把文件 放置于Linux
2016-03-17 10:54:45
2615
1
原创 git上传本地Intellij idea 项目到github
一.安装git客户端Window下安装git客户端。 二.配置Intellij idea中的Git/ GitHub打开Preference-- Version Control。 下拉选择Github,填写Host、Login和Password,然后Test是否成功。 选择Git,指定Git路径后,Test测试功能是否正常。 三
2016-03-17 09:40:10
51034
5
原创 Redhat&CentOS 国内YUM源配置
1.说明本文档适用于Redhat 6.3-6.5, Centos6,配置国内YUM源 参考yum安装http://qingwang.blog.51cto.com/505009/1551228/ http://blog.youkuaiyun.com/catoop/article/details/41345471 网易yum镜像http://mirrors.163.com/
2016-03-14 10:20:06
656
原创 hadoop系列文档6-对官方MapReduce 过程的翻译(二)
Job ConfigurationTask Execution & EnvironmentMemory ManagementMap ParametersShuffle/Reduce ParametersConfigured ParametersTask LogsDistributing LibrariesJob Submission and Moni
2016-03-12 16:16:29
377
原创 hadoop系列文档5-对官方MapReduce 过程的翻译(一)
MapReduce教程 MapReduce教程目的 环境条件总览输入输出 Example: WordCount v1.0源码 用法 Walk-throughMapReduce - User InterfacesPayloadMapperReducerPartitionerCounterJob Configuration
2016-03-12 16:14:26
1002
原创 hadoop系列文档4-配置Yarn高可用HA
背景之前有一篇高可用HDFS HA的配置文档,此文档类似上次,介绍如何配置高可用Yarn’s ResourceManager,在hadoop中默认只有一个ResourceManger,现在增加一个节点,类似我们的NameNode的active/stangdby状态。 参考文章http://hadoop.apache.org/docs/current/hadoop-yarn/hado
2016-03-12 09:45:28
3725
原创 hadoop系列文档3-配置Hdfs高可用HA
背景早在Hadoop2.0.0之前,在一个HDFS集群中,只有一个NameNode,如何这个NameNode因为某种原因挂掉了(SPOF),那么整个集群将不可用。 参考文章http://www.cnblogs.com/meiyuanbao/p/hadoop2.htmlhttp://blog.youkuaiyun.com/skywalker_only/article/details/4030
2016-03-12 09:34:29
2610
原创 hadoop系列文档2-hdfs文件系统命令诠释
本文是针对hadoop-2.7.1版本,翻译apache官网对于hdfs文件系统的命令的描述,水平有限,有不对处,还望指正。官方的网址:点击打开链接总览FS文件系统包含各种类似shell命令能直接作用于Hadoop分布式文件系统和其他一些Hadoop支持的系统类似 LocalFS, HFTP FS, S3 FS 等等。文件系统的shell这样被调用:bin/
2016-03-03 13:42:16
721
原创 hadoop系列文档1-hadoop安装教程
一.前言本教程旨在在Linux系统中安装7节点Hadoop-2.7.1分布式集群。在安装之前,你需要确保已经下载如下安装软件包:1:Linux 操作系统 –Red hat6.4 64bit(命令cat /etc/issue查看系统信息)2:jdk-7u79-linux-x64.gz3:hadoop-2.7.1.tar.gz二.安装环境1. 安装JDK解压
2016-02-28 12:12:05
1230
转载 SQL union 和xml
use test_infogocreate table tb( a1 int, a2 nvarchar(10) )insert into tb select 1,'a' union ALL select 1,'b'insert into tb select 2,'x' union ALL select 2,'y' union ALL select 2,'z' --拼接的
2014-11-18 10:09:09
976
转载 delphi dxDBGrid使用集锦
一、如何设定可以多列自动排序? 只能使用分组:如按a1,a2,a3,a4排序 先按a1分组,再a2,再a3 然后设置a4的排列(升/降) 二、如何设定左边几列,不能滚动? 建立Band0,Band1 Band0的Fixed=tfLeft Band1的Fixed=tfnone 设置要锁定的字段的BandIndex=0,其它为1 三、如何访问,显示字段
2014-11-12 09:55:08
5828
转载 delphi TTreeView
数据库结构 Create table zhibiaotb (id int primary key,name varchar(100),type int ,upid int) 首先定义 树结点的结构:TUnitNodeInfo = record ID: integer; Name: string; unitType: integer; Upid: integ
2014-11-12 08:28:53
692
转载 delphi idftp和idhttp控件
IDFTP1 连接远程服务器procedure Connect(AAutoLogin: boolean; const ATimeout: Integer);2 改变目录procedure ChangeDir(const ADirName: string);3 下载procedure Get(const ASourceFile: string; ADest: TStream; A
2014-10-28 16:32:06
3461
转载 Delphi中TStringList类常用属性方法详解
//TStringList 常用方法与属性:var List: TStringList; i: Integer;begin List := TStringList.Create; List.Add('Strings1'); {添加} List.Add('Strings2'); List.Exchange(0,1); {置换}
2014-10-24 15:53:23
621
转载 alter table *** add constraint *** 用法
1.主键约束:要对一个列加主键约束的话,这列就必须要满足的条件就是分空因为主键约束:就是对一个列进行了约束,约束为(非空、不重复)以下是代码 要对一个列加主键,列名为id,表名为emp格式为:alter table 表格名称 add constraint 约束名称 增加的约束类型 (列名)例子:alter table emp add constraint ppp p
2014-10-23 10:02:00
3007
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人