csolo的博客

1、 安装linux或者安装linux虚拟机本人是安装linux虚拟机centos ，至于网上很多用乌班图，我觉的因为是实践，所以基本无差2、 安装ssh         linux 一般自带    rpm -qa |grep ssh 3、创建 hadoop用户    用root用户登录    创建用户组：   groupadd   hadoop   

本篇针对CDH5中的一些问题处理进行归纳

CDH5 主要是用在开发环境中使用，经历了多次重装，所以觉得有必要整理一下如何进行删除、离线安装

ELK是开源的日志收集管理工具，主要由三种软件组合而成，所以说是一种技术栈。实践的目的是了解ELK的部署和应用。

转载自博客：http://blog.youkuaiyun.com/yangzhaohui168/article/details/33403555Apache Hadoop的服务的部署比较繁琐，需要手工编辑配置文件、下载依赖包等。Cloudera Manager以GUI的方式的管理CDH集群，提供向导式的安装步骤。由于需要对Hive,HBase,Impala,Spark进行功能测试，就采用了Clou

HBase的安装对应与hadoop的三种版本，也有单机版和伪分布式、全分布式三种方式。 全分布式采用一组zookeeper来进行保持集群软件之间的一致性，具体在下一节说明。一、目标   在伪分布式发布的hadoop主机上，安装配置hbase，并验证可用性二、准备   1） 环境说明：        主机： linux虚拟机centos6.5      hadoo

集群发布试验后，后续要转向hadoop开发，所以下面要进行伪分布式发布和eclipse结合的实践。hadoop伪分布式发布第一步  规划        主机： 192.168.136.155，  hostname     master        主机操作系统; centos6.5 (虚拟机)      （注： 我尝试设置主机hostname为 localhost，不

本人环境为win10（才从win7升级）        eclipse是  Kepler Service Release 1        在win10下，安装了vm workstation，其上安装了centos6.5 ，并在上面部署了hadoop2.6.4的伪分布式安装一、 目标        设置win10下的eclipse开发环境，并且可以在此环境上开发hadoop应用

在eclipse环境下开发的代码，可以打包并放入到linux环境的 hadoop 下运行。第一步：打包前提是已经安装了打包工具，fatjar。          首先eclipse右上角，从map/reduce 切换到java， 点击工程，右键会出现fat jar。       选中fatjar，打开打包配置界面。       执行finished后，eclip

第一步： 集群规划master   192.168.136.140slave1  192.168.136.151slave2  192.168.136.152第二步：配置环境变量：  1）  vi /etc/profile  在最后面添加如下代码： export JAVA_HOME=/usr/java/jdk1.7.0_80export JAVA_BIN=/

系统环境准备好后，还需要进行配置和hadoop软件的下载安装。1、 ssh配置这里的ssh配置是指ssh 配置无密钥登录，原因是因为hadoop集群环境下，有大量节点机器，所以配置无密钥登录    1.1： 系统主机和主机名配置     修改系统的主机名，比如本人实践的主机，设置为master.hadoop      需要修改2个文件,  修改操作使用 root用户

   最近看了些AIOPS的资料，对于里面提及的一个普罗米修斯Prometheus起了兴趣，首先是联想到异形，哈哈。去看了一下，普罗米修斯还真是厉害，而且还是开源的，真是搬砖党的福音。功能：在业务层用作埋点系统Prometheus支持多种语言（Go，java，python，ruby官方提供客户端，其他语言有第三方开源客户端）。我们可以通过客户端方面的对核心业务进行埋点。如下单流程、添加购...