hadoop笔记
succeedloveaaaa
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
访问hdfs地址报错:java.io.IOException: Incomplete HDFS URI, no host: hdfs:
详细错误:Caused by: java.io.IOException: Incomplete HDFS URI, no host: hdfs:/test/conf/test.xml这个错误原因是缺少hadoop配置文件,将hadoop对应的配置(hdfs-site、core-site)文件加入到程序的classpath即可原创 2021-12-21 14:28:42 · 7001 阅读 · 4 评论 -
解决Unable to load native-hadoop library for your platform
安装hadoop启动之后总有警告:Unable to load native-hadoop library for your platform... using builtin-java classes where applicable环境:Red Hat 6.4 64位,jdk1.7 64位在网上找了很久,试了好多个解决方法,终于成功了。下面分享下,希望帮助遇到类似问题的人。首先找到原创 2015-09-20 14:39:55 · 35697 阅读 · 5 评论 -
HDP 2.4安装
一、环境准备:1、先了解下HDP2.4HDP2.4包含了hadoop2.7、hive1.2.1、tez0.7等等比较新的组件,具体可参考官方文档:http://zh.hortonworks.com/hdp/whats-new/。2、搭建本地yum源当服务器没有外网环境或者网络情况不好时,可以搭建本地yum源,先要下载hdp和ambari的相关文件,参照官方文档,需要下载下面三个文件原创 2016-03-27 14:44:17 · 6565 阅读 · 0 评论 -
ambari-agent启动报错
问题:在redhat6.4安装hdp没发现问题,但在redhat6.5安装hdp时出现下面的问题ambari-agent启动时报错:netutil.py:89 -SSLError: Failed to connect. Please check openssl library versions.在网上搜索一番之后,查看官方文档有相关问题描述:When deploying HDP原创 2016-10-07 18:27:52 · 6906 阅读 · 0 评论 -
HDP2.4安装部署LZO
一、安装lzo包hadoop上安装lzo一般我们可以自己去下载lzo的包并且编译后安装,但比较麻烦。而HDP已经帮我们打包了lzo相关的rpm包,使用下面几个yum操作即可安装完毕:1、安装lzo基本包:yum -y install lzo lzo-devel hadoop-lzo hadoop-lzo-native2、安装hdp对应版本的lzo环境包(安装完会自动在hdp原创 2017-01-13 19:34:46 · 1804 阅读 · 2 评论 -
Ubuntu14搭建HDP本地源
环境准备:Server1:本地源服务器Server2:测试服务器1.下载HDP安装包到Server1wget http://public-repo-1.hortonworks.com/ambari/ubuntu14/2.x/updates/2.6.0.0/ambari-2.6.0.0-ubuntu14.tar.gz2.在Server1安装apache2.1 安装原创 2018-01-06 16:29:37 · 1051 阅读 · 0 评论
分享