阿里云上Linux系统HDFS下载错误的解决

解决阿里云Linux系统HDFS下载失败问题
最新推荐文章于 2023-10-25 17:00:09 发布
原创 最新推荐文章于 2023-10-25 17:00:09 发布 · 563 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

在尝试从阿里云Linux系统下载HDFS文件时遇到服务器响应时间过长或拒绝连接的问题。通过将Linux的集群信息添加到Windows的hosts文件，并在安全组中开放50075端口，成功解决了下载问题。

错误

点击download时，显示服务器响应时间过长或者服务器拒绝连接
在这里插入图片描述

我的配置

core-site.xml
在这里插入图片描述

错误的分析与解决

首先将Linux下的 /etc/hosts的集群信息写道 windows
C:\Windows\System32\drivers\etc的hosts中
vim /etc/hosts
这个是win上的（必须写公网IP）

保存后仍然不能下载
仔细分析后 发现下载页面的url上端口位50075
于是在安全组中加入端口50075
在这里插入图片描述
可以下载了！！！
在这里插入图片描述
欢迎大家有问题私信我，大家一起解决。

最低0.47元/天 解锁文章
【HDFS】 文件下载失败：找不到 XXX 的服务器 IP 地址（主机访问找不到虚拟机IP）
懂得一千零一种,赋予你失败的方法！
12-26 1823
问题： 在将jar包放在集群中运行成功后，转存到hdfs上。打开hdfs，想要下载结果文件查看时，出现了找不到虚拟机的IP地址。 分析 下载访问hdfs的时候，域名解析没有找到相对应的IP地址。 解决方案 — 在hosts文件中添加虚拟机IP 找到C盘下的hosts文件 打开 ，在最后添加上虚拟机IP及其名称 由于是C盘可能会有权限原因，这里我使用火绒安全软件直接修改，然后保存退出。 再次进入hdfs，点击下载，就可以了~ 当然，如果添加的虚拟机含有主从节点（伪分布式.
记录阿里云服务器搭建伪分布Hadoop以及hive远程连接
jiam6的博客
03-28 1277
小机器搭建Hadoop伪分布式
HDFS页面Download数据文件报错解决
qq_16977687的博客
09-06 1094
上传文件后，下载却跳转页面报错 是因为没有将Linux服务器上的 /etc/hosts文件中的集群信息，添加到本地hosts文件中，本地无法映射找不到。 打开C:\Windows\System32\drivers\etc\hosts对应自己的Linux上的集群配置，再去下载就可以了 ...
关于hdfs突然无法上传下载文件的解决方法（Couldn‘t upload the file）
zywenmag的博客
10-11 9150
关于hdfs上传文件报Couldn't upload the file的解决方案
hdfs 文件外网下载失败
wang1hong2lu3的专栏
08-02 649
外网hadoop页面下载文件失败解决
在hdfs的web页面中下载到windows不成功
weixin_53063015的博客
02-08 2212
在hdfs的web页面中下载到windows不成功 本人在学习的时候跟着操作一模一样，反复看了无数遍都没有不一样的地方，但就是下载不了一点就变成无法访问，在web页面中想要将上传的文件下载下来找了很多文章发现在windows中没有这个虚拟主机名和ip的映射就解析不出来 我在这里使用的火绒修改 也可以在c:\windows\system32\drivers\etc\hosts中修改 在文件的末尾添加上ip与主机地址保存 然后就可以下载了 ...
阿里云搭建完全分布式
weixin_50911786的博客
06-03 1700
阿里云ECS搭建完全分布式
分布式文件系统HDFS
fakerlove的博客
12-12 1336
分布式文件系统HDFS（按块存储，默认一个block块128M） 一、分布式文件系统HDFS 1、产生背景 传统的本地文件系统（单机式），在数据量过快、数据备份、数据安全性、操作使用便捷性上存在严重不足。 2、特点介绍 2.1 高容错和高可用性，硬件错误是常态而不是异常 HDFS设计为运行在普通硬件上，所以硬件故障是很正常的。HDFS提供文本存储副本策略，可以实现错误自检并快速自动回复。个别硬件的...
阿里云云原生一体化数仓 - 数据安全能力解读
阿里云云栖号
08-04 2509
云原生一体化数仓数据安全能力基于MaxCompute与DataWorks的组合能力，包括数据分级机制、敏感数据识别算法、用户权限级别和数据安全级别自动映射、数据脱敏、审批和权限回收流程、审计机制、开发生产环境隔离等安全能力，实现了端到端的安全管控能力。...
搭建Hadoop集群后无法使用主机名在web上访问、访问HDFS上的文件拒绝下载，内容预览为object
guzhengh的博客
10-25 781
如果不能修改，先将hosts文件移动到桌面，修改后再移回去。
在练习利用hdfs文件系统进行上传,下载，查看文件代码的编写时，报出拒绝连接的问题
qq_37036963的博客
01-31 626
  首先看，start-dfs.sh 和 start-all.sh的区别 　　start-dfs.sh 只启动namenode 和datanode        start-all.sh还包括yarn的resourcemanager 和nodemanager 在练习利用hdfs文件系统进行上传,下载，查看文件代码的编写时，报出拒绝连接的问题   因为hdfs文件系统的使用必须开启nam...
阿里云 Linux 安装中文包解决乱码
小朴朴的博客
08-10 2110
sudo apt-get install  language-pack-zh-han*
解决hadoop使用web UI界面无法下载和预览文件
Fal_se的博客
10-10 1202
解决hadoop使用web UI界面无法下载和预览文件
Linux系统出现拒绝链接HDFS服务问题及解决办法
HYX_joker的博客
04-09 8070
问题描述 : 在unbantu16.04系统中要进入HDFS服务失败,本机到127.0.0.1主机的9000 端口，被拒绝。提示拒绝链接的错误 原因: 可能由于dfs的服务还没有开启,先去检查dfs服务是否开启 在这里我们发现dfs服务没有开启,首先前往cd /usr/local/hadoop路径下,打开dfs服务. 打开服务以后再次检查,确认服务完全开启.(注意四条服务缺一不可) (下面给出缺少服务的解决方法) 再次进入HDFS服务成功. 如果没有成功,还有出现拒绝链接问题,可能就是jps没有完
HDFS无法下载数据解决办法
python伊甸园的博客
08-31 6435
问题描述： 在使用hive的时候，已经把数据加载到hive里面的数据库，也就是hdfs上，但是当打开监控页面，想在hdfs上下载已被加载的数据时，出现了个小问题：无法下载数据，网页直接报错。 问题出现的原因：无法找到对应的地址，即存放数据节点的ip。 问题解决： 修改本地电脑的hosts文件，添加自己linux上主节点和从节点的ip地址即可。 1)寻找到自己电脑的hosts文件：...
Maven配置了阿里云镜像仍然下载失败问题
m0_54853420的博客
04-21 2164
错误信息： Plugin org.apache.maven.plugins:maven-archetype-plugin:RELEASE or one of its dependencies could not be resolved: Failed to read artifact descriptor for org.apache.maven.plugins:maven-archetype-plugin:jar:RELEASE: Failed to resolve version for org.apa
HDFS页面下载数据文件报错解决
TT-Learning
12-06 5231
从HDFS页面下载文件时，报错 点击Download之后，地址解析错误 问题解决 将Linux服务器上的 /etc/hosts文件中的集群信息，添加到本地hosts文件中 C:\Windows\System32\drivers\etc\hosts 重新在HDFS页面上下载数据 下载完成。。 ...
cong从hdfs系统下载文件失败（访问node03节点失败）
24koby
03-22 395
在本地主机hosts文件中加入域名解析
阿里云Hadoop集群配置与搭建全面指南
这篇教程详细介绍了如何在阿里云上搭建一个基于Linux的大数据Hadoop集群。以下是关键步骤和知识点的解析： 1. **配置免密登录**： 在Hadoop集群中，为了方便节点间进行无密码SSH通信，需要在所有节点上生成SSH密钥...
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值