有毛病-优快云博客

原创 elasticsearch+logstash+kafka配置说明

ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。本文档简述ElasticSearch配合kafka单机部署的一个环境，以及j...

2019-11-30 09:58:58 1251

原创 mvn项目配置es连接及基础应用

1.首先在配置文件中需要配置kafaka和es服务器的参数（建议作为配置参数，不要在代码写死）http请求的端口是9200，客户端是9300需要在pom.xml中添加jar依赖：org.elasticsearch.clienttransport6.4.22.以下为es链接查询的一个java实例，包括了新增日志，分页查询，排序，模糊查询等。参考官网的说明文档：https://ww...

2019-11-30 09:56:16 515

原创 Nginx集群和jmeter分布式部署

10.72.66.141，10.72.66.156， 10.72.66.1571.nginx:安装在10.72.66.151的/usr/local/nginx/下版本/home/ganges/tools/nginx-1.15.9后面用windows机器10.72.66.1052.10.72.66.141，10.72.66.157、10.72.66.156部署1400接入服务器3.安装...

2019-11-30 09:52:00 282

原创 kafka搭建

1、下载Kafka并解压下载:curl -L -O http://mirrors.cnnic.cn/apache/kafka/0.9.0.0/kafka_2.10-0.9.0.0.tgz或wget http://mirrors.shu.edu.cn/apache/kafka/2.0.0/kafka_2.12-2.0.0.tgz解压：tar zxvf ./kafka_2.12-2.0.0...

2019-11-30 09:50:54 189

原创 Elasticsearch的集群搭建

目标：1、之前百万级设备接入时，ES单机的写入性能达到27322条/秒；2、ES采用集群，初步考虑3台12vCPU/16G内存/80G磁盘集群，性能期望能超过27322条/秒；3、需测试出单虚机的写入性能，集群的写入性能，集群写入性能是否随着机器数量的增加成线性增长；4、需测试出ES集群在1秒的写入性能（峰值时），需测试出持续一段时间（1小时）的峰值写入，ES集群的写入性能是否有下降；1...

2019-11-30 09:49:33 147

原创 es搭建

准备文件：elasticsearch-6.4.2.tar.gzkibana-6.4.2-x86_64.rpmlogstash-6.4.2.tar.gz环境：JDK 和 NodeJS可参考https://www.extlight.com/2017/09/27/Elasticsearch-%E5%9F%BA%E7%A1%80%E5%85%A5%E9%97%A8/1.安装elasticse...

2019-11-30 09:47:30 275