大数据笔记（三）：IDEA下使用Maven工程与HDFS进行简单交互

最近在看厦大林子雨老师的mooc，3.6讲使用Eclipse开发环境与HDFS进行交互，我比较喜欢IDEA的风格，这篇blog记录了在使用IDEA时踩过的坑。

配置Maven环境

1. Maven是什么？
   Maven是基于项目对象模型(POM project object model)，可以通过一小段描述信息（配置）来管理项目的构建，报告和文档的软件项目管理工具。（我的理解：通过pom.xml自动下载jar包并优化协作开发共享包的插件，而不用手动去导入jar包）
2. 下载 Maven
3. 单步执行以下命令

   $ cd Downloads    #进入下载文件夹
   $ sudo tar -zxvf apache-maven-3.6.1-bin.tar.gz -C /usr/local  #解压
   $ cd /usr/local  #进入解压后的目录
   $ sudo mv apache-maven-3.6.1 maven  #重命名
   $ sudo gedit ~/.bashrc #添加环境变量
   

4. 环境变量中添加

   #maven
   export M2_HOME=/usr/local/maven
   export CLASSPATH=$CLASSPATH:$M2_HOME/lib
   export PATH=$PATH:$M2_HOME/bin
   

   

   $ source ~/.bashrc  #刷新环境变量配置
   $ mvn -v #查看Maven版本
   

   如图出现版本号则安装成功

创建Maven工程

1. IDEA中NewProject创建Maven
   
2. pom.xml中填入以下内容（需要Maven加载的jar包集合）

   <dependencies>
           <dependency>
               <groupId>org.apache.hadoop</groupId>
               <artifactId>hadoop-common</artifactId>
               <version>2.7.1</version>
           </dependency>
           <dependency>
               <groupId>org.apache.hadoop</groupId></