
大数据平台-日常运维
文章平均质量分 82
留下一些经验和记录以便大家少走弯路
EdwardsWang丶
唯有站在山巅,才能领略山川激荡云海泛波的壮丽。
展开
-
Flink 1.17 Flink-SQL-Gateway HiveServer2 源码分析
Flink 1.17 Flink-SQL-Gateway HiveServer2原创 2023-03-30 14:09:33 · 1266 阅读 · 1 评论 -
Apache Kafka 漏洞 【CVE-2023-25194】说明及解决建议
Apache Kafka 漏洞 【CVE-2023-25194】说明 及 解决建议原创 2023-02-10 15:40:14 · 12365 阅读 · 0 评论 -
Apache Beam 问题汇总
Apache Beam 问题汇总泛型擦除问题Exception in thread "main" java.lang.IllegalStateException: Unable to return a default Coder for ParDo(Anonymous)/ParMultiDo(Anonymous).output [PCollection@577127077]. Correct one of the following root causes: No Coder has been原创 2022-05-19 13:44:01 · 392 阅读 · 0 评论 -
自定义Ranger插件 Zeppelin集成Ranger方案 (非LDAP模式)
目录序:一、Zeppelin权限部分分析1、zeppelin-note权限分析2、zeppelin-shiro权限分析二、shiro权限原理分析及Ranger原理分析1、shiro认证授权原理2、Ranger认证授权原理三、自定义Ranger插件1、编写shiroService2、编写资源json文件3、编写Ranger授权类四、自定义Shiro拦截器(RangerFilter)五、测试序:最近项目需求要用Ranger把Zeppelin管...原创 2021-04-23 16:02:08 · 2212 阅读 · 3 评论 -
Zeppelin-0.9.0同步Apache DS LDAP 方案
目录序:一、Zeppelin0.9.0的安装二、Apache DS Ldap的安装三、Zeppelin集成ApacheDS LDAP1、ApacheDS LDAP部分操作(1)创建新的partition(2)创建用户和用户组,准备做zeppelin的映射2、Zeppelin相关配置序:最近在工作中遇到了Zeppelin要同步Ranger的需求,由于项目中有LDAP组件,省去了改源码做shiro集成ranger的麻烦。项目内部使用的ApacheDS Ldap,在Z.原创 2021-04-02 17:38:26 · 629 阅读 · 1 评论 -
Zeppelin-0.9.0 开启kerberos登陆认证
目录序:一、kerberos及Zeppelin的安装(已安装好的直接跳转第二部分)二、Zeppelin开启Kerberos步骤序:因为工作需求,需要开启Zeppelin的Kerberos认证,在Zeppelin0.9.0之前的版本,需要依赖脚本和LDAP以及修改部分Zeppelin认证部分源码来做到集成Kerberos,在Zeppelin0.9.0版本,官方发布了Zeppelin开启Kerberos的方式,下面记录一下我踩的坑和开启步骤,以便大家少走弯路。一、...原创 2021-03-25 10:55:21 · 986 阅读 · 0 评论