tez-ui docker镜像打包配置并部署K8S

原创

已于 2022-11-19 23:34:01 修改 · 625 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#tez

于 2022-07-23 17:41:13 首次发布

本文详细指导如何下载和配置Tez UI，通过Docker镜像构建、K8s部署，并调整YARN、Hive设置。涉及步骤包括修改配置文件、构建Docker镜像、Kubernetes应用部署和服务配置。

一、下载tez ui安装包并修改配置文件

1.1 选择版本下载， tez-ui下载官方地址

mkdir tez-ui && cd tez-ui
wget https://repository.apache.org/content/repositories/releases/org/apache/tez/tez-ui/0.9.1/tez-ui-0.9.1.war

1.2 解压war包，修改配置文件

# 解压
unzip tez-ui-0.9.1.war
# 修改配置文件  将ENV.hosts.timeline和ENV.hosts.rm修改为对应地址
vim config/configs.env

ENV = {
   
   
  hosts: {

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

董不懂22

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

hive on tez集成完整采坑指南(含tez-ui及安全环境)

匆匆z2的博客

03-10

1万+

hive on tez 介绍使用版本 hadoop 3.1.1 hive 3.1.0 tez 0.9.2 timeline v1 安装过程注意点官网上文档并不能完整的搭建,需要参考源码中的文档部分配置官网文档没有写出来,需要查看源代码排查前置条件 hadoop安全集群 hive已安装 tez搭建 tez打包编译 tez需要根据hadoop环境的版本,使用对应的脚本编译生成对应的...

hive on tez安装部署、配置及tez-ui配置

fuyun6363的博客

02-16

7953

hive有三种引擎：mapreduce、spark、tez，默认引擎为MapReduce，但MapReduce的计算效率非常低，而Spark和Tez引擎效率高，公司一般会使用Spark或Tez作为hive的引擎。 Tez官网：http://tez.apache.org/ 在官网中介绍，Tez的YARN Timeline在Hadoop 2.6.x及以上版本才支持，低版本有些功能并不支持，所以如果想用...

参与评论您还未登录，请先登录后发表或查看评论

安装Tez Ui

one_uueu的博客

12-04

938

tomcat下载 wget https://archive.apache.org/dist/tomcat/tomcat-8/v8.5.73/bin/apache-tomcat-8.5.73.tar.gz 解压： tar -zxvf apache-tomcat-8.5.73.tar.gz tez下载、解压： mkdir /opt/apache-tomcat-8.5.73/webapps/tez-ui cd /opt/apache-tomcat-8.5.73/webapps/tez-ui wget https:

Setting Up Tez Ui

weixin_33932129的博客

12-27

197

本文介绍了tez ui的安装配置。在上一篇源代码编译安装tez的时候，已经生成了tez-ui-0.9.0.war文件，具体配置过程如下：1、Tomcat的配置 [hadoop@hdp01 ~]$ wget http://mirrors.hust.edu.cn/apache/tomcat/tomcat-9/v9.0.2/bin/apache-tomcat-9.0.2.tar.gz [hadoop@h...

tez-ui-0.10.1.war

05-12

tez-ui

zh_s_z的博客

12-07

610

tez使用版本：tez-0.9.1.tar.gz tomcat使用版本：tomcat-8.5.28.tar.gz hadoop使用版本：hadoop-2.7.3.tar.gz ============================tez-site.xml  <configuration> <property&...

tez-ui配置文档

weixin_33935777的博客

09-14

590

一、在tez-ui的config.js文件里面修改：（修改为yarn主节点ip）timelineBaseUrl: 'http://192.168.1.101:8188',RMWebUrl: 'http://192.168.1.101:8088',二、配置yarn的timeline服务:修改文件，添加如下配置并重启 yarn服务。<!-- co...

已编译好的github上最新的tez-ui-0.10.1

01-23

Tez 0.9安装部署+hive on tez配置 + Tez-UI

墨小柒的博客

06-06

1万+

Tez说明将xyz替换为您正在使用的tez发行版号。例如0.5.0。对于Tez版本0.8.3和更高版本，Tez需要Apache Hadoop版本为2.6.0或更高版本。对于Tez版本0.9.0及更高版本，Tez需要Apache Hadoop版本为2.7.0或更高版本。关于版本 1.Hadoop 2.7.0+（我的是2.7.1） 2.Tez还需要Protocol Buffers 2....

简单！自己打包的 docker镜像，如何部署到本地 k8s 上？

热门推荐

hugo_lei的博客

07-02

1万+

前提：k8s 内部使用的 docker 和本地安装的 docker daemon 是两回事，这就导致一个问题，我在本地打包的 docker image，如何在 k8s 里部署呢？答案是：使用 docker 本地仓库，将 docker image push 到本地仓库，然后修改 k8s 为从本地仓库拉取 image。在实际使用docker的过程中，因为产品主要使用了微服务的架构，会有很多不同的服务镜像，将生成的镜像放到docker-hub上是不合适的。而且为了便于后续的自动化运维和部署...

docker-hive-on-tez:在 Tez 上运行的 Apache Hive 的 Docker 镜像

06-10

在 Tez 上运行 Apache Hive 的 Docker 镜像此存储库包含一个 docker 文件，用于构建 docker 映像以在 Tez 上运行 Apache Hive。这个 docker 文件依赖于我的其他包含和基础镜像的存储库。当前版本 Apache Hive（主干版） Apache Tez 0.5.2 Apache Hadoop 2.5.2 PostgreSQL 9.3（Hive 元存储后端）在 Mac OS X 上运行此步骤仅适用于 Mac OS X，因为 Mac OS X 本身不支持 docker。要在 Mac OS X 上运行 docker，我们需要 Boot2Docker。 Boot2Docker 安装无头虚拟机，运行轻量级 linux 发行版并设置运行 docker 守护进程。设置泊坞窗从安装 Boot2Docker。安装后，从终端运行bo

tez-0.9.1.tar.gz

09-18

Tez 0.91 minimal jar包和tar包，基于CDH6.2编译的具体为3.0.0-cdh6.2.0，没有tez-ui ，没有具体验证，才编译好就上传了，明天给测试结果

TEZ UI搭建

weixin_33889245的博客

05-05

780

官方 TEZUI 需要TEZ6+hadoop2.6.0其实 TEZUI TEZ0.53+hadoop2.4.0+也可以玩只要hadoop有timelineserver但是hadoop2.4.0 hadoop2.5.0 timelineserver不支持跨域请求。。所以用ambari2.2中的tez view来搭建可以实现，并且方便快捷。tez-site.xml<co...

hive on spark 与 hive on tez共存，tez-ui配置

qq_27474277的博客

03-08

920

1.设置tez-ui 需要先安装Tomcat 1.找到war包因为我安装的是bin所以在安装包中就有tez-ui-0.9.0.war 自己编译的话也有生成，在这里不做过多赘述。 #2.将tez-ui部署在tomcat #在webapps下创建tez-ui目录 mkdir /usr/local/apache/apache-tomcat-8.5.31/webapps/tez-ui #进入文件 cd /usr/local/apache/apache-tomcat-8.5.31/webapps/tez-ui

tez ui 安装测试

duguyiren3476的专栏

08-04

364

tez ui 安装测试标签（空格分隔）：未分类环境：hadoop-2.7.1，tez-0.7.0，tomcat 7 将编译后的tez-ui.xxx.war文件复制到tomcat的webapps目录中修改tez-ui的war解压后的文件scripts/configs.js文件 App.setConfigs({ /* Environment configuration...

docker镜像制作：构建UI镜像

java电商源码分享

04-17

467

dockerbuild-t<你docker私服的域名+路径>/manager-seller:7.2.3-f./manager-seller/Dockerfile.dockerbuild-t<你docker私服的域名+路径>/buyer-wap:7.2.3-f./unpackage/docker/Dockerfile.dockerbuild-t<你docker私服的域名+路径>/buyer-nuxt-pc:7.2.3-f./buyer/Dockerfile.

Ambari2.7 安装Tez Ui

weixin_38751513的博客

11-14

2637

因Ambari2.6移除了Tez的ui管理界面，在Debug tez的任务比较麻烦所以研究了下怎么安装附官方公告ambari2.6升级2.7时去掉了tez-ui https://docs.cloudera.com/HDPDocuments/Ambari-2.7.0.0/bk_ambari-upgrade/content/bhvr_changes_upgrade_hdp3_amb27.html ...

Tez学习笔记-UI安装部署

PURSUE ONE PIECE

01-22

3374

Tez 简介

主要写大数据集群一线运维和学习工作经验

05-14

3851

Tez 本地模式是一种测试 Tez 作业的开发工具，不需要启动 Hadoop 集群。本地模式运行 Tez 组件 AppMaster、TaskRunner，这些组件在集群上执行作业时使用。从开发人员工具的角度来看，它提供了几个优点。快速原型 Hadoop 设置，启动成本等不涉及。单元测试快速执行，因为分配资源、启动 jvm 等的开销被消除了。易于调试的单个 JVM 运行所有用户代码。虽然大多数组件在本地模式下重用，但也有一些组件不是调度和容器重用是不同的。 yarn 本地资源的处理。本地模