Ubuntu下Eclipse中运行Hadoop程序的参数问题

最新推荐文章于 2025-09-07 20:05:35 发布

weixin_30886233

最新推荐文章于 2025-09-07 20:05:35 发布

阅读量78

点赞数

CC 4.0 BY-SA版权

文章标签：大数据开发工具

原文链接：http://www.cnblogs.com/little-YTMM/p/4450814.html

本文详细阐述了在使用Eclipse配置Hadoop程序时，确保hadoop安装目录下的`fs.default.name`端口号与hadooplocations中的对应参数一致的重要性，并指导如何正确设置本地文件系统路径为HDFS路径，即`hdfs://localhost:8020/user/input`和`hdfs://localhost:8020/user/output`。

需要统一的参数：

当配置好eclipse中hadoop的程序后，几个参数需要统一一下：
hadoop安装目录下/etc/core_site.xml中 fs.default.name的端口号一定要与hadoop locations中的相应参数保持一致;
当运行主函数时，往往都需要输入参数：input和output，这里的路径是Hadoop自己的文件系统hdfs中的路径，在本地文件夹中无法中找到，应该为：hdfs://localhost:8020/user/input hdfs://localhost:8020/user/output

转载于:https://www.cnblogs.com/little-YTMM/p/4450814.html