
大数据
Tang ZH
学习,分享,交流
展开
-
CentOS虚拟机上配置Hadoop+Spark实现大数据分析平台的流程
安装并配置虚拟机 总体思路 需要安装四个虚拟机:master、data1、data2、data3 首先安装并配置data1虚拟机,在该虚拟机上操作四台虚拟机共有的过程,其后将data1虚拟机进行复制拷贝,得到data2、data3、master,在分别在各自虚拟机分别进行设置,该思路可以减小一部分工作量。 安装data1节点 在VMware workstation 15 pro中安装CentOS7...原创 2019-03-26 12:41:18 · 652 阅读 · 0 评论 -
Hadoop HDFS常用命令
常用HDFS命令格式 Hadoop fs -xx mkdir 创建HDFS目录 ls 列出HDFS目录 copyFromLocal 复制本地文件到HDFS copyToLocal 从HDFS复制到本地 put 复制本地文件到HDFS cat 列出HDFS目录下的文件内容 get 将HDFS上的文件复制到本地 cp 复制HDFS文件 rm 删除HDFS文件 user@master $ ...原创 2019-03-29 23:08:19 · 432 阅读 · 0 评论