- 博客(8)
- 收藏
- 关注
原创 Hive集成HBase配置及使用
①已经安装 Hive,且已完成与 Kerberos、Sentry 的集成;(参考博文②已经安装 HBase,且已完成与 Kerberos 的集成;(参考博文③开启了 Hadoop 的 KMS 服务。
2025-07-09 20:01:01
1235
原创 Hive集成Sentry(含Kerberos、KMS)
Apache Sentry为Hadoop生态系统提供基于角色(RBAC)的细粒度数据访问控制。文章详细介绍了:1) 数据安全的两大核心概念:认证(Authentication)和鉴权(Authorization);2) Sentry的RBAC机制,通过角色(Role)、用户组(Group)和权限(Privilege)实现权限管理;3) Sentry的服务架构包括;4) Hive与Sentry的集成配置,包括Kerberos认证、KMS服务、beeline连接等;5) 具体命令应用
2025-07-02 11:04:19
1251
原创 大数据安全之 KMS 原理、配置、使用(含加密、证书等原理介绍,及Kerberos 集成)
摘要:Hadoop数据安全包括静态数据(HDFS透明加密)和传输数据安全。HDFS加密区域(EncryptionZone)实现透明加密,通过KMS(Key Management Server)管理密钥体系,包含EZK(加密区域密钥)和DEK(数据加密密钥)。配置过程涉及keystore创建、Kerberos认证设置及KMS服务部署。使用流程包括:1)创建加密区域和密钥;2)向加密区域写入数据(自动加密);3)读取数据(自动解密)。验证表明文件内容在磁盘上加密存储,通过HDFS命令可正常读取,实现了透明的数据
2025-06-24 14:12:36
1291
原创 hbase安装配置使用,及与Kerberos的集成
摘要:本文详细介绍了HBase 1.2.0版本的安装与Kerberos认证配置过程。主要内容包括:1) 解压安装包并配置环境变量;2) 创建Kerberos实体和keytab文件;3) 修改hbase-env.sh和hbase-site.xml配置文件,设置HDFS存储路径、Zookeeper集群及Kerberos认证参数;4) 在HDFS创建/hbase目录并赋权;5) 通过kinit获取TGT后启动HBase服务;6) 验证服务并演示基本Shell操作;7) 针对常见的Kerberos认证失败和HDFS
2025-06-13 20:16:29
1315
原创 linux 系统进入紧急模式(emergency mode)处理
CentOS7系统因强制关机导致启动进入紧急模式,报错显示XFS文件系统元数据日志与实际状态不一致(LSM>LSN)。通过分析系统日志发现根文件系统挂载失败。处理步骤:1)尝试挂载/dev/mapper/centos-root失败;2)使用xfs_repair -L清空元数据日志后修复成功;3)重新挂载根文件系统确认数据完整;4)进入chroot环境重新安装GRUB2引导程序,生成新配置文件。最后卸载分区并重启系统,成功解决问题。此案例展示了XFS文件系统日志机制的工作原理及强制关机导致的数据一致性问
2025-06-12 12:36:00
4386
原创 linux 离线安装 python2.7.5 及所需 whl 包(二)——重点关注排错思路
离线生产环境安装 python whl 包,happybase 等报错处理
2025-06-04 19:21:07
658
原创 linux 离线安装 python2.7.5 及所需 whl 包(一)
使用VirtualBox虚拟机作为测试机,进行离线环境测试安装python环境,离线安装python包,解决python包依赖问题。并最终应用于生产环境服务器。全流程保姆级教程。
2025-06-04 12:36:20
1106
原创 vbox虚拟机不使用桥接的前提下,实现本机ssh连接、同时可访问互联网
【虚拟机双网卡联网配置方案】通过配置双网卡实现虚拟机联网需求:在不使用“桥接”的前提下,实现虚拟机本地连接,同时连接互联网
2025-05-28 18:52:01
378
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅