
大数据
lanyue1
这个作者很懒,什么都没留下…
展开
-
Linux下ELK6.2.3日志分析平台搭建
官网下载地址:https://www.elastic.co/downloadsELK是Elasticsearch、Logstash、Kibana的简称,这三者是核心套件,但并非全部。Elasticsearch是实时全文搜索和分析引擎,提供搜集、分析、存储数据三大功能;是一套开放REST和JAVA API等结构提供高效搜索功能,可扩展的分布式系统。它构建于Apache Lucene搜索引擎库...原创 2019-01-15 22:30:25 · 474 阅读 · 0 评论 -
Elasticsearch生命周期
项目中需要对Elasticsearch中的数据进行定时清理,经过网上资料搜索和部分实践,对于ES的生命周期发展历程,进行了大致整理,仅供参考。1、ES5.0以前的版本可以通过设置ttl处理:https://www.elastic.co/guide/en/elasticsearch/reference/1.7/mapping-ttl-field.html...原创 2019-10-13 12:19:44 · 284 阅读 · 0 评论 -
多个Gbase集群间表同步思路
背景:项目中存在多个不同子系统,每个子系统都拥有一套gbase集群,而有些表是各个子系统间公用的,如果各子系统只在自己的Gbase集群中更新公共配置,就会导致各子系统配置数据不一致,进而影响整个系统的功能功能,所以需要有一个框架来定时同步各子系统的配置数据。问题:如何判断表变更?进行表同步时,考虑版本不同可能存在表结构差异,如何保证同步时让业务影响最小?思路:1、gbase提供集群间同步工...原创 2019-04-30 19:58:15 · 1322 阅读 · 0 评论