- 博客(8)
- 资源 (4)
- 收藏
- 关注
原创 Flume监控
Flume提供了四种监控方式:JMX Reporting、Ganglia Reporting、JSON Reporting、Custom Reporting,选择最简单的JSON Reporting方式,监控方案是JSON Reporting + flume_exporter + Prometheus + Grafana。JSON Reporting请参考官方文档http://flume.a...
2019-09-11 19:09:25
3040
5
原创 druid部署及使用
1. 安装使用的是imply版本下载路径:https://imply.io/get-started需要填写一些个人信息才可以下载2. 集群规划-------------------------------------------------------192.168.112.40 | 192.168.112.41 | 192.168.112.42--------------...
2018-09-11 14:56:23
2827
原创 HDP升级
HDP2.6.1升级到HDP2.6.5,使用的是离线升级的方式1.下载ambari安装包,下载地址为 https://hortonworks.com/downloads/#data-platform2.备份之前的yum源sudo mv /etc/yum.repos.d/HDP.repo /etc/yum.repos.d/HDP.repo.baksudo mv /etc/yum.repos.d/HD...
2018-07-10 16:56:23
1838
原创 kafka-manager部署
kafka-manager部署源码地址 https://github.com/yahoo/kafka-manager修改配置项,配置项可以打包之前修改,也可以打包之后修改修改conf目录下的 application.conf配置文件配置zookeeper地址,kafka-manager.zkhosts = xxx:2181访问时是否需要密码,默认是false,不需要密码, basicAuthent...
2018-07-09 19:18:38
562
原创 ambari升级
ambari由2.5.1升级到2.6.2,采用的是离线升级的方式1.下载ambari安装包,下载地址为 https://hortonworks.com/downloads/#data-platform2.备份之前的yum源sudo mv /etc/yum.repos.d/ambari.repo /etc/yum.repos.d/ambari.repo.bak3.修改yum源,所有节点都要修改sud...
2018-07-09 18:50:22
1033
原创 flink on yarn部署
flink on yarn部署flink on yarn需要的组件与版本如下Zookeeper 3.4.9 用于做Flink的JobManager的HA服务hadoop 2.7.2 搭建HDFS和Yarnflink 1.3.2 或者 1.4.1版本(scala 2.11)Zookeeper, HDFS 和 Yarn 的组件的安装可以参照网上的教程。在zookeeper,HDFS 和Yarn的组件的...
2018-06-14 18:50:54
2284
原创 Flink Rest API使用
Flink Rest API使用----------------### 1. 上传jar包接口- 请求路径 - http://hadoop3.test.yunwei.puppet.dh:40610/jars/upload- 请求方式 - POST- 请求参数 - 设置请求头 application/java-archive- 返回结果 ...
2018-05-29 19:28:16
14655
2
ajax封装数据原理
2015-08-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人