eclipse使用hadoopapi创建目录，没有出现错误，但是hdfs没有目录eclipse使用hadoopapi创建目录，没有出现错误，

Hadoop API创建HDFS目录问题
最新推荐文章于 2022-12-05 01:21:00 发布
原创 最新推荐文章于 2022-12-05 01:21:00 发布 · 1.2k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #hadoop

本文描述了在使用Eclipse与Hadoop API时遇到的HDFS目录创建失败问题，控制台显示Namenode未正确配置的错误信息。文章分享了解决方案，即在hdfs-site.xml中将虚拟机主机名替换为虚拟机的IP地址。

我在用eclipse使用hadoopapi时发现我创建目录时，并没有实质性的报错，但是hdfs就是没创建文件目录

控制台出现提醒

Namenode for mycluster remains unresolved for ID nn2.  Check your hdfs-site.xml file to ensure namenodes are configured properly.

解决办法

起初哪里我写的虚拟机主机名名，后来发现应该写虚拟机的ip地址

java hdfs 新建目录_第九讲：通过JavaAPI读写虚拟机里面的HDFS-创建文件夹
weixin_35998980的博客
02-13 1749
本讲我们来讲解如何读写另外一台计算机上面的HDFS。在实际的环境中，我们的HDFS存储和应用程序很有可能是运行在不同的计算机上的。 上一讲我们实现了网络的互通，那么这一讲我们来讲解编写一个java程序来读写hdfs.。步骤：1、确保两台电脑网络互通(上一讲内容)；2、Centos里面的HDFS运行正常(上一讲内容)；3、Centos里面的防火墙开通9000端口(也就是centos里面的hdfs配置...
Hadoop单机安装
小旋风_亮宇
07-03 566
参考 core-site.xml： <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> <property> <name&gt
使用Hadoop API操作HDFS文件时遇到的问题及解决总结
RYP_S 的专栏
07-11 5415
1、报错信息“提示找不到或无法加载主类”  函数中有无main方法 2 你用java 命令 时输入的类名是否正确。 3  classpath设置是否正确。 4  （很可能就是这个问题）看你的类是否是在某一个包下面（即类文件中有package person；类似的内容）；     如果有得话，你千万不要在命令行窗口中进到person这个包的目录下，去编译运行java类，    而要到 包
WARN hdfs.DFSUtil: Namenode for null remains unresolved for ID null异常会导致secondarynamenode守护进程无法开启
抛物线的博客
06-02 9500
搭建hadoop并启动时 出现如下报错 19/06/02 07:17:33 WARN hdfs.DFSUtil: Namenode for null remains unresolved for ID null. Check your hdfs-site.xml file to ensure namenodes are configured properly. 警告异常时请查看core-sit...
【大数据报错】ERROR namenode.NameNode: Failed to start namenode.
热门推荐
debimeng
02-07 2万+
ERROR namenode.NameNode: Failed to start namenode. 场景： 搭建hadoop3.1.1的HA分布式环境时，格式化node01节点后，在node02执行以下命令同步数据： hdfs namenode -bootstrapStandby 报错 2019-02-07 21:18:14,687 INFO namenode.NameNode: create...
hdfs namenode -format　初始化创建不了目录的问题
微信号：RunsenLiu
03-22 1987
Hadoop格式化namenode错误：java.io.IOException: Cannot create directory hdfs namenode -format　初始化创建不了目录的问题，这是权限的问题。 用ｒｏｏｔ账号　执行，搞定
eclipse的Hadoop插件无法连接到hdfs，通过API连接时连接程序运行无报错但运行创建文件程序时报错拒绝连接，请问这该怎么解决？
qq_57434919的博客
08-01 276
java操作Hadoop源码之HDFS Java API操作-创建目录
01-17
我们将探讨Hadoop的环境配置、HDFS API的使用以及具体创建目录的步骤。 首先，理解Hadoop的环境配置至关重要。在进行Java编程之前，你需要确保已经在本地或集群上正确安装了Hadoop，并配置好了`hadoop-env.sh`和`...
如何使用Java API在Eclipse中创建Hadoop HDFS目录并上传本地文件？请提供详细步骤。
最新发布
11-01
在Hadoop的分布式文件系统（HDFS）中使用Java API进行目录创建和文件上传，是进行大规模数据处理的基本操作。首先，确保你已经安装并启动了Hadoop服务，并在Eclipse中配置好了Hadoop的类库依赖。以下是详细步骤： ...
如何在Eclipse中通过Java API创建Hadoop HDFS目录并上传本地文件？
11-01
要在Eclipse中使用Java API进行Hadoop HDFS的操作，首先需要确保你已经配置了正确的Hadoop环境，并且有Java开发环境。这里是一些步骤来创建目录和上传文件： 参考资源链接：[Hadoop Java API实战：创建目录与文件...
如何利用Java API在Eclipse中创建Hadoop HDFS目录并上传本地文件？请提供详细步骤。
11-01
在Hadoop的分布式文件系统（HDFS）中，使用Java API进行基本操作如创建目录和上传文件是常见的需求。首先，确保Hadoop环境已经正确配置和启动。然后，在Eclipse中创建一个Java项目，并导入必要的Hadoop JAR包到项目...
配置没问题，但通过java api仍然操作不了hdfs的问题。
hpccph15的博客
02-22 634
问题 近来刚入门hadoop，搭建完集群后，新建maven工程通过java api在hdfs上创建一个文件夹，通过如下代码，运行不报错，但一直不能在hdfs上创建，反而该文件夹在windows系统上创建了 package hpc.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Fil...
eclipse安装hadoop插件，HDFS中没有输出的问题。
OOC_ZC的博客
11-15 1027
安装完插件后，运行代码，只显示3个WARN，而hdfs里没有输出文件，但在命令行下运行代码时正常并且有输出的。 纠结了好长时间，一度换了别的版本的eclipse。 后来发现是默认用户对hdfs的权限不够，应该是我安装时用root用户安装所致。 后修改hdfs权限为 777  问题解决！ 语句大致为  hadoop fs -chmod 777 /
Hadoop基础教程-第3章 HDFS：分布式文件系统（3.2 HDFS文件读写）
程裕强的专栏
05-14 2847
第3章 HDFS：分布式文件系统3.2 HDFS文件读写3.2.1 文件访问权限针对文件和目录，HDFS有与POSIX非常相似的权限模式。 一共提供三类权限模式：只读权限（r）、写入权限(w)和可执行权限（x）。读取文件或列出目录内容时需要只读权限。写入一个文件，或是在一个目录上创建及删除文件或目录，需要写入权限。对于文件而言，可执行权限可以忽略，因为你不能在HDFS中执行文件（与POSI
hdfs java 找不到文件_mapreduce执行程序HDFS路径找不到
weixin_39528467的博客
03-04 974
因为mapreduce执行程序的数据输入路径是在HDFS路径下，而这个路径下的数据是我shell远程执行hive查询语句获得，但是mapreduce程序读取不到，可是我java端的DFS location就是连接HDFS里面有这个文件夹和数据，请问怎么办？mapreduce中文件路径是这样设置的：FileInputFormat.addInputPath(job, new Path("hdfs://...
【问题解决】利用Eclipse，在hadoop上传文件到hdfs没有内容
BigCabbageFy的博客
04-08 6098
本文适用于一些在网上找了半天答案都没解决问题的人群，因为我也是在按网上说道弄了一天，最后才解决的。如果你是刚遇到问题，还没有深入，建议你查看这篇文章 http://f.dataguru.cn/hadoop-208802-1-1.html 将问题一步一步排除后仍没有解决的话，可以试试我这个方法。如果还是不行，那就我也无能为力了，革命道路还很漫长，你仍需努力啊！！（笑哭） 问题描述： 它没...
hadoop源码环境搭建，sun.net.util.IPAddressUtil类没找到
sxyqhyt的博客
08-28 908
sun.net包里的类，在eclipse里默认是不让用的。 解决办法是自定义access rules 工程上右键->工程属性->java builder path->Libraries标签，点击JRE System Library里面的Access rules，add sun/** 为accessible，如果该项存在，就edit...
警告hdfs。数据格式:对于IDnn，mycluster的命名节点仍然未解决
miaotoull的博客
12-05 307
hadoop ha搭建环境 进行namenode格式化的时候 碰到的配置文件出现问题 原因分析： 进入到hadoop底下的hdfs.site.xml 我们发现 书写的时候出了问题导致两个打到了一起导致了这个错误把他修改回dfs.namenode.http-address.mycluster。nn1然后别忘记scp传给另外两台 切记切记如果对你有帮助 那就是最好的
【hadoop系列】Hadoop HDFS命令
weixin_36250487的博客
06-09 1万+
格式：hadoop fs -命令主要有如下的命令：命令说明hadoop fs -mkdir创建HDFS目录hadoop fs -ls列出HDFS目录hadoop fs -copyFromLocal使用-copyFromLocal复制本地文件（local）到HDFShadoop fs -put使用-put复制本地（local）文件到HDFShadoop fs -copyToLocal将HDFS上的文...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值