HBASE
关注
分享
扫一扫
文章平均质量分 70
phoenix非常慢,hbase并发性能,hbase分页查询性能,phoenix连接hbase,hbase性能调优,hbase二级索引phoenix
阿啄debugIT
0、精通java，及常用设计模式，熟练编写shell脚本，掌握python、scala、golang的编写;
1、精通Spring Cloud等微服务架构，掌握SpringBoot、batis等后端技术，kafka、redis、es等中间件的整合开发；
2、熟悉掌握mysql、pg等关系数据的原理及调优，及NoSQL数据的存储和查询；
3、熟悉CDH各个组件，及精通离线、实时等计算技术；
4、掌握java多线程高并发编程，及整合shiro、redis、fastdfs、MQ、netty等开发；
5、熟悉K8S集群管理Docker容器，及理解掌握openstack原理和操作。
展开
-
spark对离线仓库数据库，如hive ,mongdb,hbase等中的特定敏感数据进行脱敏处理，及加解密的解决方案
前言在生产中，难免存在敏感数据，如姓名、职业、职务、年龄、血型、婚姻状况、宗教信仰、学历、专业资格、工作经历、家庭住址、电话号码（手机用户的手机号码）、身份证号码、信用卡号码、指纹、病史、电子邮件、网上登录账号和密码等等，在数据流通过程中，都需要进行数据脱敏，但又要大数据类业务不会受到脱敏的影响，达成脱敏前后的数据一致性和有效性。进行数据脱敏的方法很多，无非对数据进行加解密，若是数据量比较大，就需要离线处理。比如采用spark对离线仓库数据库，如hive ,mongdb,hbase等中的特定敏感数据原创 2021-01-25 23:25:34 · 1661 阅读 · 2 评论 -
如何基于HBase构建容纳大规模数据、支撑高并发、毫秒响应、稳定高效的OLTP实时系统
前言本文致力于从架构原理、集群部署、性能优化与使用技巧等方面，阐述在如何基于HBase构建容纳大规模数据、支撑高并发、毫秒响应、稳定高效的OLTP实时系统 。一、架构原理1.1 基本架构从上层往下可以看到HBase架构中的角色分配为：Client——>Zookeeper——>HMaster——>RegionServer——>HDFSClientClient是执行查询、写入等对HBase表数据进行增删改查的使用方，可以是使用HBase Client API原创 2020-10-04 15:04:19 · 2945 阅读 · 3 评论