1. 开发环境准备
1. Hadoop集群安装
- 分布式集群搭建: http://blog.youkuaiyun.com/wee_mita/article/details/52750112
- 详细的参数配置:http://blog.youkuaiyun.com/wee_mita/article/details/53911747
2. Maven安装
- Maven软件的安装http://blog.youkuaiyun.com/wee_mita/article/details/52370050
- Maven的配置:http://blog.youkuaiyun.com/wee_mita/article/details/60317352(在下载依赖的时候,国外的repository会比较慢,可以把Maven的中心仓库修改为国内的镜像站点)
3. Intellij IDEA安装
- 官网下载对应系统的版本:https://www.jetbrains.com/idea/
- IEDA使用指南:http://blog.youkuaiyun.com/wee_mita/article/details/70837618
2. 创建项目
1. 创建Maven项目
2. 输入GroupId 和 ArtifactId
新建项目后有提示 Maven project need to be imported ,选择导入
3. 修改pom.xml文件
根据hadoop版本添加相应的依赖版本
ps:编写代码需要用到什么依赖,就在pom.xml中添加相应的依赖即可
添加apache的源
repositories>
<repository>
<id