- 博客(11)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Mysql 数据实时同步hbase
一、前言要实时同步数据，首先要能实时的监控到数据库数据的变化，可以使用canal、Maxwell 等工具完成。我选用canal，因为它更灵活，更合格我的项目需求。二、通过canal监控数据库数据变化Canal安装教程：https://www.aliyun.com/jiaocheng/1117575.html三、项目整体架构项目整体架构、离线同步：https://blog.csd...
2018-11-01 18:33:54
6359
1
原创 Mysql 数据导入 Hbase
目录一、前言二、使用sqoop遇到的问题三、项目搭建（maven项目）四、项目重点五、项目代码六、数据实时同步一、前言在大数据项目中需要做数据迁移时，我们第一时间总会想到sqoop。sqoop是apache 旗下一款“Hadoop 和关系数据库服务器之间传送数据”的工具，使用才来也很方便。但因项目需求在使用sqoop是遇到了一些问题，所以决定自己开发一个一个项目解决...
2018-11-01 17:58:05
1462
原创 ELK平台架构
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187一、ELK简介ELK不是一款软件，而是elastic 公司旗下三款产品 ElasticSearch 、Logstash 、Kibana 的首字母组合。Elasticsearch：提供存储数据、全文搜索、分析引擎三大功能。基于 Apache Luce...
2018-08-22 17:16:28
685
原创 Elasticsearch集群安装、配置
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187一、安装（elasticsearch-6.2.3） 1. 下载链接 https://www.elastic.co/downloads/past-releases https://arti...
2018-08-22 17:16:22
361
原创 Filebeat 安装、配置
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187 一、下载 https://www.elastic.co/downloads/past-releases https://artifacts.elastic.co/downloads/beats/filebeat/filebe...
2018-08-22 17:16:15
7667
原创 Logstash 安装、配置
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187 一、下载 https://www.elastic.co/downloads/past-releases https://artifacts.elastic.co/downloads/logstash/logstash...
2018-08-22 17:16:10
423
原创 kibana安装、配置
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187一、下载 https://www.elastic.co/downloads/past-releases https://artifacts.elastic.co/downloads/kibana/kibana-6.2.3-li...
2018-08-22 17:16:03
402
原创 elasticsearch-head安装、配置
ELK实战：https://blog.youkuaiyun.com/beyond_qjm/article/details/81943187 一、安装Nodejs 1. 下载安装包 wget https://npm.taobao.org/mirrors/node/latest-v4.x/node-v4.4.7-linux-x64.tar.gz ...
2018-08-22 17:15:56
263
原创 Linux添加服务
在 /etc/init.d/ 目录下创建脚本就可以通过 service 命令启动，如：vi /etc/init.d/logstash #!/bin/bash export JAVA_HOME=/usr/lib/jdk/jdk1.8.0_144 export JRE_HOME=$JAVA_HOME/jre export PATH=$PATH:$HOME/.local/...
2018-08-22 17:15:47
2012
原创 ELK实战
架构说明：https://blog.youkuaiyun.com/beyond_qjm/article/details/81941820一、基本架构二、Filebeat安装服务器 安装根目录 172.17.0.153 /opt/filebeat-6.2.3-linux-x86_64 172.17.0.154 /opt/filebeat-6...
2018-08-22 17:15:37
1787
原创 JAVA实现简单的RPC框架
一、RPC简介RPC（Remote Procedure Call）——远程过程调用，它是一种通过网络从远程计算机程序上请求服务。RPC是与语言无关的。可用于：高并发程序，将程序各层分离以提高程序的负载；公共模块，为其他模块提供服务等。1. 调用客户端句柄，执行传送参数2. 调用本地系统内核发送网络消息3. 消息传送到远程主机4. 服务器句柄得到消息并取得参数5. 执行远...
2018-01-17 12:33:05
16954
4
OpenJDK11U-jdk_aarch64_linux_hotspot_11.0.10_9.tar.gz
2021-03-22
JAVA实的RPC框架
2018-01-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人