
Hue
jast_zsh
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hue开发指南 - 提交 Spark 程序
Hue开发指南Hue是面向 Hadoop 的开源用户界面,可以让您更轻松地运行和开发 Hive 查询、管理 HDFS 中的文件、运行和开发 Pig 脚本以及管理表。1.Spark文件打包成一个Jar包提交Hue运行1.上传Spark Jar包至HDFS文件系统上传方式不做具体介绍2.Hue中创建Spark任务打开Workflow选择 ACTIONS...原创 2020-03-31 16:27:39 · 3614 阅读 · 6 评论 -
什么是 Apache Sentry , Apache Sentry 介绍
Apache Sentry是Hadoop中的一个基于角色的细粒度授权组件。Sentry可以在Hadoop集群上对通过身份认证的用户和应用程序控制数据访问权限。Sentry开箱即用的支持Hive,Hive Metastore/HCatalog,Solr,Impala,HDFS(仅限Hive表数据),Kafka和Kudu(通过Impala)。Sentry旨在成为Hadoop各组件的可插拔授权...转载 2019-08-09 17:15:57 · 1765 阅读 · 0 评论 -
HUE 打开 WorkFlow异常 Operation category READ is not supported in state standby
异常:在hue上配置的一些定时任务突然停止执行。1.打开页面HUE->WorkFlow 发现页面异常,无法进入WorkFlow,如下图2.查看HUE日志查看到WebHdfsException异常,访问HDFS文件浏览器报错,[26/Jun/2019 09:29:55 +0800] exception ERROR Internal Server E...原创 2019-06-26 10:12:28 · 2005 阅读 · 0 评论 -
HUE Schedule 定时调度 - 启动时间设置问题(执行次数过多,时区问题)
在启动Schedule 时需要设置开始时间,结束时间不用讨论,开始时间设置时尽量为当前时间因为开始时间设置如果小于今天,比如设置为2019-01-01,定时器是每天1:29分启动,则会将日期之前的次数执行了,即执行开始日期到当前日期所需执行次数。如上图定义执行时间为,每天9:29和10:29分进行执行(定时时间比时间时间早8小时,时区问题,之前文章有描述https://blog.csd...原创 2019-04-09 18:41:38 · 2133 阅读 · 0 评论 -
HUE WorkFlow Schedule 调用Hive参数传递,外部参数传递,时间参数传递
目录WorkFlow传静态参数Schedule 传动态参数oozie常用的系统常量场景:HUE执行任务需要从外部传入参数,不能在脚本写死,比较麻烦WorkFlow传静态参数执行的脚本代码如下CREATE EXTERNAL TABLE ${hivevar:database}.${hivevar:tableName}${pt_tab}(key stri...原创 2019-04-09 18:41:08 · 4582 阅读 · 0 评论 -
output.properties data exceeds its limit [2048] HUE执行脚本异常
Hue执行Shell脚本报错 java.io.IOException: output.properties data exceeds its limit [2048] at org.apache.oozie.action.hadoop.LocalFsOperations.getLocalFileContentAsString(LocalFsOperations.java:86)...原创 2019-02-25 11:20:06 · 2409 阅读 · 0 评论 -
HUE集成Hbase
目录 一、Hbase开启代理用户相关配置二、代理用户授权认证三、检查HUE在hue.ini文件中指定的HBASE的本地配置目录一、Hbase开启代理用户相关配置Cloudera Manager修改Hbase配置 或Hbase配置文件-hbase-site.xml<property> <name>hbase.thrift.support.pr...原创 2019-01-04 14:50:23 · 14229 阅读 · 0 评论 -
HUE 提交Schedule 时区问题
1.配置如下,每天定时 14:02 启动2.运行后,任务状态提示,时间变成了06:02:003.修改HUE的时区配置修改后3.重启4.然后执行发现,还是不起作用,后排查了一下oozie问题,发现hue的时区配置对oozie无法生效,我们时区比oozie的快了8个小时,提交任务时提前8个小时也就是14:20执行,解决该问题~Cloudera ...原创 2018-11-26 14:21:16 · 23983 阅读 · 0 评论 -
Hue添加RDBMS(关系型数据库)
Hue添加RDBMS方式Hue界面没有Mysql添加方式,需要修改配置 切换至Hue3界面,找一下 3.发现有添加方式4.点进去发现,说要再配置文件中添加5.经查阅资料发现,需要在hue的配置中hue_safety_valve.ini 修改/添加 相关数据库配置6.添加相关配置进去[librdbms][[databases]][[[mysql]]]...原创 2018-09-14 18:06:31 · 40093 阅读 · 0 评论 -
HUE Load Balancer 启动失败
安装LoadBalancer服务的机器要安装mod_ssl,httpd解决方案:yum -y install mod_ssl注意:安装前也要安装httpd服务,安装完成后记得查看是否启动yum -y install httpd 异常信息如下:Can't open /opt/cm-5.13.0/run/cloudera-scm-agent/process/601-...原创 2018-09-14 16:50:11 · 2182 阅读 · 0 评论