
分布式
bigcharsen
哈喽,kitty!!!
展开
-
ZooKeeper分布式应用系统服务器上下线动态感知简单程序
#以创建Maven项目为例:#POM文件导入依赖或者去仓库搜索相关所需版本: 本人常用仓库地址: http://mvnrepository.com/<dependency> <groupId>org.apache.zookeeper</groupId> <artifactId>zookeeper</artifactId> <version>3.5原创 2017-02-23 15:55:51 · 1066 阅读 · 0 评论 -
ZooKeeper集群环境的配置与安装
ZooKeeper版本:3.4.5 本人环境:虚拟机安装三个Linux工作站 主机名分别为:hadoop/hadoop01/hadoop02 JDK版本:1.71:解压 tar -zxvf zookeeper-3.4.5.tar.gz(解压)2:重命名 mv zookeeper-3.4.5 zookeeper(重命名文件夹zookeeper-3.4.5为zookeeper)3:修改环境变量原创 2017-02-22 21:19:26 · 354 阅读 · 0 评论 -
生产环境部署Hadoop+Spark+HBase+Hue
大数据平台生产环境部署指南@(Hadoop)总结一下在生产环境部署hadoop+Spark+Hbase+Hue等产品遇到的问题、提高效率的方法和相关的配置。集群规划假设现在生产环境的信息如下:服务器数量:6 操作系统:Centos7 Master节点数:2 Zookeeper节点数:3 Slave节点数:4 划分各个机器的角色如下:主机名 角色 运行进程 hadoop1 Master转载 2017-08-03 10:21:11 · 1804 阅读 · 0 评论 -
Hadoop生产环境的配置
5.时钟同步所有节点的系统时间要与当前时间保持一致。查看当前系统时间date Tue Nov 3 06:06:04 CST 2015 如果系统时间与当前时间不一致,进行以下操作。[root@Master1 ~]# cd /usr/share/zoneinfo/ [root@Maseter1 zoneinfo]# ls //找到Asia [root@Master转载 2017-08-03 10:27:48 · 930 阅读 · 0 评论 -
集群运行MapReduce任务报错Error: Java heap space
集群运行MapReduce任务时,有部分任务在跑reduce任务时报错: 17/09/19 19:48:00 INFO mapreduce.Job: Task Id : attempt_1505821347382_0001_r_000000_0, Status : FAILED Error: Java heap space Container killed by the Applic原创 2017-09-19 23:37:23 · 2433 阅读 · 0 评论