
总结
文章平均质量分 92
qq_29922903
独立搭建并维护过大数据平台,4年大数据相关经验,目前主要从事spark开发,熟悉Scala,spark等大数据相关组件,喜欢研究新技术
展开
-
Kubernetes集群安装
Kubernetes集群安装准备工作1. 修改主机名2. 配置主机间的域名解析3. 配置免密登录4. 关闭防火墙和selinux5. 关闭交换分区6. 设置网桥包经IPTables,Core文件生成路径7. 同步时间(略)8. 升级内核至最新版本8.1 启用ELRepo仓库8.2 查看可用的系统内核包8.3 安装最新内核8.4 查看当前机器所有内核版本8.5 将最新的内核版本设置为默认内核版本8....原创 2020-01-07 15:35:43 · 249 阅读 · 0 评论 -
基于Hortonworks shc使用spark2.2.1操作hbase 2.0.0(编译)
基于Hortonworks shc使用spark2.2.1操作hbase 2.0.0(编译) 网上看了很多对于shc的编译文章,但是始终没法编译成功,自己测试了很多次,最终搞定了,这也是我眼拙的原因,其实人家都把执行的命令写的清清楚楚的 源码下载 记得需要选择对应的版本,v1.1.2 版本是基于hbase1.1.2开发的,如果自己的系统版本是hbase2.x的请选择v1.1.3 编译源码包 ...原创 2019-01-06 00:32:52 · 1837 阅读 · 0 评论