在cdh5.16中使用Zeppelin

最新推荐文章于 2021-08-18 15:48:36 发布
最新推荐文章于 2021-08-18 15:48:36 发布
阅读量291 收藏 2
点赞数
CC 4.0 BY-SA版权
分类专栏： 学习经历 文章标签： zeppelin cdh spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_42570350/article/details/97271178
本文详细介绍了在阿里云镜像下载Zeppelin并进行配置的过程，包括解压、修改配置文件及解决jar包问题，最后演示了如何创建Spark测试案例。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

最近闲来无事，决定安装个zeppelin玩玩，我是在阿里云镜像上面下载的，国内下载速度比在官网快多了
阿里镜像链接
这上面目前只有两个版本，我下载的0.8.0版本
在这里插入图片描述
一顿解压后开始修改配置文件，修改这三个文件，复制一份去掉template后缀
在这里插入图片描述
修改的内容如下
配置登录的用户名密码
配置spark，hbase，hadoop，hive和java等
禁止任何用户都可以登录
然后就可以启动了
在这里插入图片描述

在浏览器上打开安装的机器ip+8080端口
在这里插入图片描述
创建job就是 Create new note
右上方有所有的解释器包括spark，hbase，shell等等，点进去里面也可以配置每个解释器
在这里插入图片描述
可能会因为缺失jar包或者jar包版本不一导致的错误，需要从各组件中cp出错的jar包到Zeppelin的lib中

创建一个spark的测试案例
在这里插入图片描述
在这里插入图片描述
这里面sparkContext，sqlContext，SparkSession都已经初始化好了，分别是sc，sqlContext，spark,不要再创建了
在这里插入图片描述

cloudera manager 集成 livy zeppelin
wflh323的专栏
05-14 479
https://github.com/alexjbush/livy_zeppelin_cdh_csd_parcels下载编译parcels文件 1.将编译好的csd，parcels 包放到cm csd文件夹和 httpd服务目录下 2.添加用，组 groupadd -r zeppelin useradd -r -g zeppelin zeppelin groupadd -r livy ...
zeppelin在CDH上的安装及使用 -- 填坑
臭臭猫
04-23 4553
zeppelin可以跟spark、flink、kylin等直接访问，将结果可视化显示。在安装zeppelin的过程中碰到各种问题，跟陈大神一起研究了好几天，终于把问题解决。我们安装zeppelin的目的主要是用spark快速的验证kylin的统计的可视化结果是否跟spark直接计算的可视化结果一致。刚开始选择下载二进制文件(zeppelin-0.7.3-bin-all.tgz)直接安装，很简单，直...
CDH整合zeppelin
weixin_34123613的博客
02-20 2097
2019独角兽企业重金招聘Python工程师标准>>> ...
CDH安装配置zeppelin-0.7.3以及配置spark查询hive表
u013013024的博客
01-17 3727
1.下载zeppelin http://zeppelin.apache.org/download.html  我下载的是796MB的那个已经编译好的，如果需要自己按照环境编译也可以，但是要很长时间编译，这个版本包含了很多插件，我虽然是CDH环境但是这个也可以使用。 2.修改配置文件 cd  /zeppelin-0.7.3-bin-all/conf cp  zeppelin-env
zeppelin0.8.0在cdh5.15.0集群的安装
qq_16094777的博客
09-07 895
前言 几年前看到zeppelin，用了一段时间；后来因为有相对于当时的业务场景更好的工具（hue）没有深入的使用zeppelin； 最近跟同事沟通了解到zeppelin的新版本有不少有趣的功能；打算安装一个，跟我们最新安装的CDH5.15集群一起使用；看看效果。 安装步骤 安装比较简单，去官网下载最新的包： http://zeppelin.apac...
cdh5.16.x-centos
05-29
cdh5.6.1 、 cdh5.6.2版本离线安装包，支持hbase phoenix的安装，适用于centos 6-7
CentOS 7 配置CDH 5.16教程
jack的博客
03-10 2205
文章目录一、预先需要下载的安装包二、关闭防火墙和SELINUX三、配置本地SSH免密钥登录四、安装JDK五、安装MySQL安装cloudera-manager如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图...
CDH5.16安装手册.docx
06-27
这个是我在2019年6月安装完写的手册，有相关配合的安装视频资源（在我的资源里找）。 这个安装是在全新的CentOS7.3下安装的，绝对可以用。 操作系统CentOS7.3 64位 Hadoop版本为CDH5.16.1 hadoop配置库使用Oracle ...
CDH5.16卸载
weixin_44675844的博客
11-06 319
集群卸载，因为一些搞不定的问题，所以卸载重装一遍 本文参考 https://blog.csdn.net/weixin_35852328/article/details/81774627 1、停掉你的所有服务，包括cm 2、停止完毕服务后，把之前安装的parcel的包 停用-删除 下面的图是开头博主的图 3、删除你的cluster 4、停止你的进程 /opt/cm-5.16.2/etc/init.d/cloudera-scm-server stop /opt/cm-5.16.2/etc/init.d
CDH5.16：添加Kafka和Spark2服务
11号车厢
07-29 1389
文章目录1、前言2、添加CDK4.02.1 选择对应的版本2.2 配置Kafka Pacel下载源2.3 CDH添加Kafka3、添加CDS2.43.1 选择对应的版本3.2 配置Spark2 Pacel下载源3.3 添加Spark23.4 测试Spark2 1、前言 CDH5有自带kafka和spark的安装包，但是版本比较低，spark是1.6版本，如果想安装更高的版本，那么就需要自己手动从官...
zeppelin简单安装.md
08-11
cloudera manager6.2.1web界面集成zeppelin，由于原装的CDH6.2.1parcel包没有包含zeppelin组件,我们公司又用到了这个zeppelin组件,所以我临危受命开始安装zeppelin,刚开始的时候也是不太懂怎么安装,第一次接触最新的版的cloudera manager,所以刚开始也是费了好久才安装成功,现在把最简单的安装方法写下来,供以后可能需要安装的朋友参考
基于cdh5.4.2的Zeppelin编译安装
weixin_33743661的博客
04-12 172
2019独角兽企业重金招聘Python工程师标准>>> ...
CDH 6.3.1 整合 Zeppelin 0.8.2
wzy0623的专栏
03-11 2365
安装 Zeppelin、配置 Zeppelin 的用户名密码、使用 Zeppelin 查询 CDH 的 hive 表、定义 Hive 解释器、定义 MySQL 解释器
livy_zeppelin_cdh_csd_parcels项目编译安装的zeppelin重启配置丢失
wflh323的专栏
06-14 545
前面介绍过通过https://github.com/alexjbush/livy_zeppelin_cdh_csd_parcels编译安装zeppelin。zeppelin安装完，配置用户角色，新建spark任务运行，一切看似都很完美。某天要修改个配置重启zeppelin登录发现以前所有配置都丢失了，又重新配上，如此反复让人很崩溃。排查丢失原因，只有在重启后才会丢失，可能是重启命令执行了某项...
CDH + phoenix+ zeppelin
weixin_34013044的博客
02-28 565
2019独角兽企业重金招聘Python工程师标准>>> ...
CDH使用CM安装整合livy和zepplin(已攻略)
莫莫绵的博客
08-18 1524
制作parcel和csd包 步骤一：我们需要编辑下build.sh 步骤二：把下载文件放进去 步骤三：在linux系统中再次执行build.sh脚本 步骤四：部署parcel和csd 步骤五：重启下cm-server 坑 步骤六：CM添加服务配置文件 启动报错信息 步骤七：访问zepplin 搞定
SPARK2-2.3.0.cloudera3-1.cdh5.13+zeppelin0.8+impala
u013013024的博客
01-17 772
1.以前我搭建的事0.7.3对应的事spark2.1，现在spark-2.3以后zeppelin-0.7.3不兼容，所以使用0.8不过也折腾了半天jar包不匹配 2.修改配置文件 cd  /zeppelin-0.8.0-bin-all/conf cp  zeppelin-env.sh.template zeppelin-env.sh cp zeppelin-site.xml.templa...
How-to: Install Apache Zeppelin on CDH
xiao_jun_0820的专栏
03-18 1858
http://blog.cloudera.com/blog/2015/07/how-to-install-apache-zeppelin-on-cdh/ Our thanks to Karthik Vadla and Abhi Basu, Big Data Solutions engineers at Intel, for permission to re-publish
CDH5.15.0+spark1.6.0+hive1.1集群与zeppelin0.8.1+spark-notebook打通踩坑总结
weixin_33811539的博客
02-27 497
2019独角兽企业重金招聘Python工程师标准>>> ...
cdh5.16非官方下载
最新发布
12-10
1. 在一些知名的软件下载网站上搜索Cdh5.16进行下载。因为Cdh是一个受欢迎的分布式数据处理平台，很可能在一些正规的下载网站上可以找到非官方版本的下载资源。 2. 参考一些技术论坛或社区，寻找与Cdh5.16相关的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值