Hadoop
关注
分享
扫一扫
文章平均质量分 95
码仙♥
一个人能做的至善之举，就是帮助另一个人知道得更多
展开
-
HDFS初级编程实践
目录0.码仙励志1.开发环境要求2.创建项目3.编写jar包的依赖信息4.远程操作HDFS的代码实现(1)import一些需要用到的类(2)远程连接HDFS系统的代码实现(3)创建hdfs文件夹的代码实现(4)实现往HDFS上传文件的代码(5)从HDFS下载文件到本地代码实现(6)在运行中读取HDFS文件的代码实现(7)HDFS文件重命名代码实现...原创 2018-11-13 20:33:07 · 973 阅读 · 0 评论 -
Hadoop环境搭建
目录零、码仙励志一、百度云下载需要的软件二、安装VM三、VM网络设置四、安装CentOS7五、master网络配置六、从master克隆slave0和slave1七、slave0和slave1网络配置八、同步时间九、Xshell5的安装与使用1.Xshell5的作用2.Xshell5的安装3.Xshell5的使用十、Xftp5的安装与使用...原创 2018-11-09 09:16:46 · 32646 阅读 · 85 评论 -
HDFS文件夹上传和下载等命令
目录零、码仙励志一、用浏览器查看hdfs目录下的文件夹和文件二、HDFS命令零、码仙励志白茶清欢无别事，我在等风也等你一、用浏览器查看hdfs目录下的文件夹和文件在浏览器中输入IP地址+端口号50070就可以，如下：然后进入下面网页然后点下面按钮下面就是hdfs中的文件夹和文件，里面默认什么也没有，需要自己上传二、HDFS命令创建一...原创 2019-05-26 16:43:44 · 52615 阅读 · 5 评论 -
WordCount实例以及在hdfs环境下运行
目录零、码仙励志一、新建工程以及配置二、编写需要处理的文件三、代码实现四、在HDFS上运行零、码仙励志讨厌自己明明不甘平凡，却又不好好努力一、新建工程以及配置请看下面链接的前三章HDFS初级编程实践二、编写需要处理的文件按照我的目录来新建文件output里面什么也不要放input里面放文件wordcount.txt的内容如...原创 2019-05-27 09:58:10 · 1433 阅读 · 0 评论 -
Python中的MapReduce以及在Hadoop环境下运行
目录零、码仙励志一、在Linux中运行二、在Hadoop环境中运行零、码仙励志年轻人不要老想着天上会掉馅饼，要脚踏实地，也许地上会捡到钱呢？一、在Linux中运行首先在Linux中新建下面的目录，里面什么也不要放，然后进入到目录/home/hadoopuser/mydoc/py然后在里面创建一个ddd.txt文件里面编写下面内容aaabbb...原创 2019-05-28 20:35:07 · 2509 阅读 · 4 评论