- 博客(7)
- 收藏
- 关注
RSS订阅原创 通过puppet hiera配置bigtop大数据集群
Puppet Hiera是一个puppet内置的键值对配置以及数据查询系统，通过hiera可以配置puppet main manifect的参数。率先理解了上面这个概念，我们就能理解bigtop原生的部署代码在部署bigtop大数据组件的时候发生了什么。若需要覆盖一些配置的话，可以在site.yaml中直接覆盖，因为在hiera.yaml之中，site的解析优先级在cluster之前。/目录之下的cluster.yaml之中。通用的hadoop集群配置在。
2022-10-13 12:01:26
984
原创 生产环境如何部署bigtop的大数据集群（小试牛刀篇）
通过puppet来部署bigtop的大数据组件是可行的，我就一步步地教大家如何生产部署前开发测试，测试无误后，如何生产部署。等待几分钟，若无异常日志输出，则表示azkaban已经部署好了，我们在阿里云开通8081端口的端口访问权限，然后可以访问试试看。关闭azkaban的集群，切换到ha-zk分支，然后运行，这个分支用来部署ha-auto用到的zookeeper的docker集群。然后我们需要安装docker，ruby, jdk，我的开发测试机为centos7，下面的代码是可以运行的。
2022-10-13 09:58:55
2362
原创 替代ambari方案：使用apache bigtop部署bigtop hadoop stack
替代ambari：下一代大数据stack部署方案！
2022-02-02 00:26:29
7311
3
原创 bigtop部署时候的问题
[BIGTOP-3088] provisioner failed to run puppet deployment on CentOS-7 - ASF JIRApuppet要使用这个补丁，不然的话会有报错
2022-01-02 20:08:52
399
原创 git登录github
ssh-keygen -t rsa -C "*****@gmail.com"ssh -T git@github.comgit config --global user.name "*****"git config --global user.email "*****@gmail.com"" git remote add origin git@github.com:userName/yourProject.git git remote prune
2021-11-30 22:27:29
1210
原创 使用Apache Bigtop编译打包开源大数据组件——以zk、hadoop、spark、hive为例
Apache Bigtop是一个编译、打包、部署开源大数据组件的工具，Apache Bigtop打包大数据组件的过程与方法写在这里
2021-07-04 11:22:48
3822
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人