本文介绍了如何在搭建好HDFS HA集群后，配置客户端以使用Eclipse（Java API）进行操作。主要内容包括设置环境变量、安装Hadoop Eclipse插件、配置Hadoop位置、创建Map/Reduce Location以及导入项目所需依赖和配置文件。
搭建好HDFS HA集群后，我们来配置客户端，用来操作HDFS HA集群
搭建HDFS HA集群参看 大数据之四 hadoop HDFS HA 高可用的完全分布式
客户端+eclipse（java API）配置
- 首先我们选择一台客户机，任意选择，只要能与集群通信即可，这里就使用真机
- 将集群中配置好的 hadoop 安装包拷贝到真机上
- 配置 hadoop 的环境变量
HADOOP_HOME：hadoop安装包的位置
PATH：%HADOOP_HOME%\bin
HADOOP_USER_NAME：登录集群的用户名称，只要是可以登录集群的用户名就可以，这里配置为root
- 将hadoop的插件放到eclipse的dropins\plugins\ 目录下，如果没有 plugins目录则手动创建。插件可到github下载对应版本。
如果是按照大数据之四 hadoop HDFS HA 高可用的完全分布式搭建的集群环境，则插件使用 2.6.0 版本
最低0.47元/天 解锁文章
扫一扫
675
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
