qq_40059532的博客

Hadoop自带了个单词计数的MapReduce程序WordCount，下面用三种方法运行该程序在开始前先在hdfs上面创建输入和输出路径：1、使用hdfs dfs -mkdir /input命令创建一个input文件夹2、使用hdfs dfs -put /home/kingssm/input/data.dat /input命令将需要执行的文件上传到hdfs上的输入文件夹3、使用hdfs ...

工具Linux系统：CentOS，版本7.0以上JDK：jdk1.8，1.8版本还分为不同的版本，但必须使用1.8版本的（注意：官网下载Linux版本的jdk）Hadoop：hadoop3.1.3，使用3.0版本以上的应该都没有问题，2.0以上的版本配置可能会有点不相同虚拟机：VMware workstations，即使是物理机安装Linux也可以JDK安装默认你虚拟机安装好了Linu...

折腾了好久，昨天终于把Hadoop安装在了window！！！有兴趣的也可以看一下怎么安装window安装hadoop安装完之后最关键的还是要知道怎么用吧，下面就使用Hadoop自带的WordCount例子运行一下工具：idea和maven（没有的话可以去下载，安装方法很简单，和jdk的安装一样，如果嫌麻烦，使用idea自带的maven也可以）new一个项目，选择使用maven构建，注意一定要...

最近做实验需要在Linux系统安装Hadoop，由于我之前就想在window上安装，所以借此机会先在window上安装再在Linux安装。个人比较喜欢安装比较新的东西，所以选择Hadoop3.1.3准备工具 ：1、jdk8，这里不要用其他jdk了，会出现一些其他问题的，我用jdk11有些包就找不到，好像jdk9都不行2、Hadoop3.1.3，官网下载，也可以下载其他的3.0以上的版本，3...