ES集群部署的核心步骤 | kibana的基础使用

已于 2025-03-29 14:06:06 修改
阅读量382 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 数据库技能 文章标签： elasticsearch jenkins 大数据
于 2024-03-27 20:03:38 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/z929118967/article/details/137086942
本文详细介绍了Elasticsearch（ES）集群的部署过程，包括前期工作、ES安装配置、添加用户安全认证、启动ES及Logstash的安装与配置。在部署中，涉及了安全组设置、内存配置、证书生成、用户权限管理和数据同步等关键步骤，确保集群稳定运行并具备安全防护。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录

引言

需求：使用ES存储船舶最新位置和航迹。

版本：8.12.2

I ES集群部署前期工作

  • 申请两台Linux机器，存储1年的航迹数据，需要4T的存储空间。

ES存储空间评估：966612条文档，需要356.93mb。 1M存储2709条，1G存储277W条数据 1天按照2000W计算，需要10G的存储空间。1月 300G 。3个月1T。

# ES版本使用8.12.2 https://www.elastic.co/cn/downloads/elasticsearch
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.12.2-linux-x86_64.tar.gz
tar -zxvf  elasticsearch-8.12.2-linux-x86_64.tar.gz
了解本专栏 订阅专栏 解锁全文 超级会员免费看
【教你通透ELK】ES集群与Kibana部署
走向CTO的路上...
07-27 765
Kibana的工作原理与ES集群的工作原理类似，其主要工作是将ES集群中的数据可视化和分析。在云服务器上部署ES集群和Kibana可以快速搭建一个大规模的数据处理和分析平台，而本地部署则可以提高数据的安全性和隐私性。（ES）是一个开源的分布式搜索和分析引擎，常用于处理大规模的日志数据、监控数据和安全数据等。（2）数据的搜索和分析：当用户向ES集群中查询数据时，ES会将查询请求发送到各个节点上进行分布式搜索和分析。（1）数据的索引和存储：ES集群将数据分散存储在各个节点之间，每个节点负责存储数据的一部分。
Elasticsearch基础入门与安装部署
小小默：进无止境
10-23 4536
【1】Elasticsearch概述 ① 什么是全文检索 全文检索是指计算机索引程序通过扫描文章中的每一个词，对每一个词建立一个索引，指明该词在文章中出现的次数和位置。当用户查询时，检索程序就根据事先建立的索引进行查找，并将查找的结果反馈给用户的检索方式。这个过程类似于通过字典中的检索字表查字的过程。全文搜索搜索引擎数据库中的数据。 ② lucene Lucene是apache软件基金会4 jak...
ES集群部署（保姆级，一篇足够）
weixin_68033186的博客
04-02 7489
ElasticSearch集群部署及验证学习
ElasticSearch的高可用
最新发布
Java就是我的道！
05-22 1026
本文详细介绍了Elasticsearch的部署方案与数据一致性解决方案。在部署方面，建议采用多主节点+多数据节点的集群架构，合理设置分片数量和大小（20-50GB/片），并配合ILM生命周期管理实现自动化运维。对于数据一致性问题，建议针对不同场景采取差异化策略：单条数据查询采用状态判断+回源兜底；聚合统计类数据采用延迟统计或走DB/数仓方案。文章还提供了refresh参数调优、增量式聚合等实用技巧，帮助实现性能与一致性的平衡。
ES的集群部署
weixin_42666548的博客
05-26 6901
ES的集群部署
es集群搭建部署
大数据开发
07-12 5778
Elasticsearch的搭建 1.部署方式,三台服务器,命名ip为mini1,mini2,mini3 ; mini1为主节点 下载Elasticsearch安装包解压后进入conf目录修改elasticsearch.yml文件 配置文件mini1 cluster.name: my-es ...
ES的安装部署以及基本操作
m0_51192710的博客
02-13 1794
ElasticSearch是一个分布式、Restful风格的搜索和数据分析引擎，能够解决不断涌现的各种用例。ES 是一个开源的高扩展的分布式全文搜索引擎，它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理 PB 级别的数据。REST 指的是一组架构约束条件和原则。满足这些约束条件和原则的应用程序或设计就是 RESTful。Web 应用程序最重要的 REST 原则是，客户端和服务器之间的交互在请求之间是无状态的。从客户端到服务器的每个请求都必须包含理解请求所必需的信息。
ElasticSearch7.7.1集群搭建 & Kibana安装
李木
01-26 2021
Elasticsearch（ES）是一个基于Apache Lucene的分布式、高扩展、近实时的搜索引擎，主要用于海量数据快速存储、实时检索、高效分析的场景。通过简单易用的RESTful API，Elasticsearch隐藏了Lucene的复杂性，使得全文搜索变得简单。分布式：由于其分布式特性，Elasticsearch可以将海量数据分散到多台服务器上存储、检索和分析。高扩展性：Elasticsearch可以扩展到上百台服务器，支持大规模数据存储和检索。
Linux环境Elasticsearch集群部署及kibana安装笔记
01-09
Elasticsearch集群部署及kibana安装笔记Elasticsearch集群部署部署步骤1. 使用root账户创建用户2. 上次相关安装包3. 安装java（如已经安装，可不需要重复）4. 安装ES5. JVM 配置6. 修改系统配置7. 启动elasticsearch...
ElasticSearch7.2.1+SearchGuard+Kibana+KerBeros集群测试环境部署文档.pdf
11-16
完成以上步骤后，你的Elasticsearch集群就已经集成了SearchGuard、Kerberos和Kibana，具备了安全的测试环境。此时，你可以通过Kibana进行数据查询和可视化，同时享受到Kerberos带来的安全认证保障。 请注意，实际...
13-ES集群模式
Black_Me的博客
02-16 2171
ES集群 单机的elasticsearch做数据存储，必然面临两个问题：海量数据存储问题、单点故障问题。 海量数据存储问题：将索引库从逻辑上拆分为N个分片（shard），存储到多个节点 单点故障问题：将分片数据在不同节点备份（replica ） ES集群相关概念: 集群（cluster）：一组拥有共同的 cluster name 的 节点。 节点（node) ：集群中的一个 Elasticearch 实例 分片（shard）：索引可以被拆分为不同的部分进行存储，称为分片。在集群环境下，一
ES(Elasticsearch)的docker安装部署教程
热门推荐
qq_33034733的博客
05-24 1万+
需要手动将docker中的es四个目录同步到宿主机上。1.1 拉取docker镜像。1.2 创建es挂载目录。1.4 桥接网络节点配置。3、logstash部署。1.3 开放防火墙端口。1.5 容器实例启动。2、Kibana部署。
es部署及使用
qq_39210987的博客
10-16 4774
本文链接：http://huserblog.com/articles/2020/10/16/1602852358163.html es介绍 Elasticsearch 是一个开源的搜索引擎，建立在一个全文搜索引擎库Apache Lucene™ 基础之上。详细参考：https://www.elastic.co/guide/cn/elasticsearch/guide/current/intro.html es基础知识 es数据存储的结构（三个主要结构：index、type、document） inde
elasticsearch 集群部署
cwyxf123的博客
04-11 3118
1、环境初始化 最小化安装 Centos 7.x/Ubuntu x86_64 操作系统的虚拟机，vcpu 2，内存 4G 或更多，操作系统盘 50G，为保证效果特额外添加一块单独的数据磁盘大小为 50G 并格式化挂载到/data 1.1 设置主机名和磁盘挂载 节点信息 IP 主机名 角色 系统版本 10.10.100.110 es-node1 node1 Ubuntu 18.04.3 10.10.100.111 es-node2 node2 Ubuntu 18.04.3 10.10.
ElasticSearch8.17.0集群搭建过程
qq_41481715的博客
01-11 1266
证书我这边没有使用默认的，使用bin目录下的工具生成的elasticsearch-certutil如果不需要证书的话enable设置false就可以了。这就是整个集群搭建的大概过程，如果有遗漏可以补充，剩下的分词插件就很简单了。
ElasticSearch8集群的安装部署
weixin_44418421的博客
06-28 1万+
ElasticSearch8集群的搭建与简单使用
Elasticsearch8.17 生产集群使用优化
maxcode
03-19 270
设置为 **100MB**，超过此限制的文档将被拒绝索引。：建议分片总数不超过 **集群节点数 × 2**。例如，5节点集群分片总数建议不超过 **10**。注意单个请求大小不宜超过 **5MB**，避免内存压力。或 **搜索后游标（Search After Cursor）**，以避免内存和性能问题。建议重新设计数据结构，避免单个文档超过 **10MB**。：直接连接的本地存储性能优于远程存储（如 NAS/SAN），减少通信开销。为 **1s**，可调整为更长间隔（如。使用代码块统一配置示例，增强可读性。
elasticsearch 8.17.3部署文档
xhcx_25的博客
03-11 2700
首次启动使用/opt/elasticsearch/bin/elasticsearch命令可以帮助我们自动生成证书以及账号密码，若使用其他命令需要自己使用bin/elasticsearch-reset-password -u elastic设置密码。下载地址https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.17.3-linux-x86_64.tar.gz。
Docker环境快速部署Elasticsearch+Kibana集群脚本指南
总结以上内容，在Linux环境下通过脚本部署Elasticsearch和Kibana集群要求掌握Linux操作系统知识、Docker容器化技术、Elasticsearch集群的安装和配置技巧、Kibana的集成使用方法，以及能够编写自动化部署脚本的能力。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

java、iOS、Vue

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值