qq_22343953的博客

文章目录hadoop搭建(二)hadoop集群搭建目的预先准备安装配置无安全模式的hadoop配置hadoop守护进程环境配置hadoop守护进程管理节点情况运行hadoop集群hadoop运行hadoop停止hadoop搭建(二)本文档翻译hadoop的集群搭建，说明来自：Hadoop Cluster Setuphadoop集群搭建目的这篇文档说明了从一些节点到数以千记的大量节点的安装...

文章目录hadoop搭建(一)问题追踪解决hadoop搭建(一)本次安装的是3.1.5版本hadoop的伪分布式，按照官方的指导手册quickly start进行出现了JAVA_HOME无法找到的问题sirius@sirius:~/hadoop$ sbin/start-dfs.shStarting namenodes on [localhost]localhost: ERROR: JAV...

文章目录hadoop搭建(三)概述一般选项用户命令archive(?归档)classpathhadoop搭建(三)本文档翻译hadoop的命令手册，来自Hadoop Commands Guide概述所有的hadoop命令可以通过bin/hadoop脚本进行调用。运行这个脚本没有添加任何参数的话就会打印所有命令的详情。用法：hadoop [--config confdir] [--logl...

文章目录hadoop搭建(四)概述appendToFilecat太多了不看了=。=要用再来查hadoop搭建(四)FileSystemShell概述文件系统(FS)shell 包括许多类似shell的命令可以和hadoop分布式文件系统(HDFS)以及其他hadoop支持的系统，比如Local FS，HFTP FS等等系统进行直接交互。FS shell的调用形式如下：bin/hadoop...

文章目录Android开发笔记(一)权限申请Android开发笔记(一)最近接手实验室研三的师兄师姐准备走了，接手他们遗留下来的工作。有个移动群智感知平台真的把我恶心坏了。基本架构如下：传输采集到的数据发布运算任务返回运算结果安卓端中央服务器HADOOP分布式运算分工的时候我接手安卓和hadoop，往后对接估计又是累到吐血。真tm的脑残。师兄信誓旦旦的和我说安卓4.0向后兼容，基本不会有...

文章目录hadoop搭建(五)修改hosts配置sshhadoop的节点配置（master与slave相同）节点环境变量slaves启动hadoophadoop搭建(五)本文档说明在外网上的分布式集群搭建，使用的是两个云服务器（阿里云和腾讯云），阿里云需要在端口规则开放端口，使用的时候注意一下关闭防火墙不必说了，前几篇搭建zookeeper的博客有过介绍修改hostsmaster中：在/...