qq_37348649的博客

接上篇我们继续：一、配置Hue访问HDFS外部系统访问HDFS只能使用httpfs的方式，不能使用HDFS默认自带的WebHdfs方式，但Ambari安装的HDFS并没有默认安装hadoop-httpfs，所以这里需要先安装hadoop-httpfs1. 安装hadoop-httpfs yum install hadoop-httpfs cd /etc/init.d ln -...

接上篇文章继续share，我把名字更改成了大数据篇，不说了直接干活。一、配置Hue访问Hive1. 修改/opt/hue/hue-4.3.0/desktop/conf/hue.ini，找到[beeswax]位置，填写配置信息，如下[beeswax]# Host where HiveServer2 is running.# If Kerberos security is enabl...

最近公司pre-prod环境部署大数据组件，下面我将部署文档笔记以博客的形式share给大家四台物理机信息配置 IP DNS User localhost01 sosvsmshadoop1.ps.com 新建Linux用户hue localhost02 sosvsmshadoop2.ps.com 新建Linux用户hue localho...

NA测试环境一、环境信息 : jdk 1.8.0_162 、go1.141、jdk 1.8.0_162部署http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html#建立文件夹 mkdir –p /usr/local/javatar -zxvf ./jdk-8u...

以在浏览器中请求https://bigdata-master:8443/gateway/hdp_ui/webhdfs/v1/tmp?op=LISTSTATUS为例SSOCookieProvider负责从http请求的cookie中读取hadoop-jwt，如果cookie中不存在hadoop-jwt，会重定向http请求至sso.authentication.provider.url（即ht...

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必...

1、登陆Ip+8080 admin/admin ，这都是默认的端口号和账户密码修改默认端口号#change client portvim /etc/ambari-server/conf/ambari.propertiesclient.api.port2、输入集群名字3、选择版本建议默认4、输入上篇文章中自制的源路径#第一个框框如果不知道自己系统是什...