优秀到卓越就差-比他更快搭建elk集群架构上篇

最新推荐文章于 2025-12-09 16:07:44 发布
原创 最新推荐文章于 2025-12-09 16:07:44 发布 · 179 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#elasticsearch #java #elk #linux #centos

本文档详述了如何在Linux环境下搭建Elasticsearch分布式集群，包括配置节点、设置内存锁定、安装插件及监控集群状态。通过修改配置文件、创建数据目录、调整内存分配以及设置主机间通信，实现多节点集群并确保数据完整性和高可用性。集群状态可通过RESTful API进行健康检查和状态查询。

工作原理

在这里插入图片描述

开源分布式搜索引擎，特点有：分布式，零配置，自动发现，索引自动分片，
索引副本机制，restful 风格接口，多数据源，自动搜索负载等

官方网站：
https://www.elastic.co

中文社区：
https://elasticsearch.cn

官方参考文档：
https://www.elastic.co/guide/en/elasticsearch/reference/6.6/setup-configuration-memory.html

下载地址：
https://mirrors.tuna.tsinghua.edu.cn/elasticstack/6.x/yum/6.6.0/
elasticsearch-6.6.0.rpm
filebeat-6.6.0-x86_64.rpm
kibana-6.6.0-x86_64.rpm
logstash-6.6.0.rpm

案例

节点名称 IP
elastic1 192.168.2.130
elastic2 192.168.2.135
elastic3 192.168.2.136

环境：虚拟环境，关闭防火墙、setenforce 宽容模式，保障能互相ping通，必须有jdk-1.8.0及以上环境

步骤：
1、 安装elasticsearch
检查Java环境：
在这里插入图片描述
安装（提前下载好，上传到服务器）
在这里插入图片描述
2、 elasticsearch目

最低0.47元/天 解锁文章
大模型训练集群容量规划：架构师的GPU资源调度与性能优化
AI天才研究院
08-06 613
大模型训练集群容量规划面临着诸多挑战。一方面，要准确预测模型未来的发展趋势，包括模型规模的增长速度、新模型架构的计算需求等，从而确定合适的集群规模。另一方面，不同类型的大模型（如语言模型、图像模型）对计算资源的需求特性不同，如何在集群中合理分配资源以满足多样化的训练任务是一大难题。在GPU资源调度方面，如何避免资源的浪费和过度分配，提高资源利用率是核心问题。同时，不同训练任务之间可能存在优先级差异，如何根据任务优先级进行GPU资源的动态分配也是需要解决的关键问题。
《掌握这些要点，AI应用架构师打造优质智能虚拟人设计系统》
AI天才研究院
07-26 1228
我是你们的技术博主，今天我们来深入探讨一个充满魅力与挑战的前沿领域——如何打造一个优质的智能虚拟人设计系统。随着元宇宙、AIGC等概念的火爆，智能虚拟人正从科幻走向现实，在娱乐、教育、金融、医疗等各行各业展现出巨大的应用潜力。在动手构建之前，我们首先需要明确设计系统本身的核心目标和应遵循的设计原则，这将指导我们后续的架构设计和技术选型。虚拟人引擎是智能虚拟人的“躯体”，负责虚拟人的视觉呈现、动作驱动和表情模拟，是用户直观感受的核心载体。数据是智能虚拟人设计系统的“血液”，支撑着系统的各项功能。
ELK系列(3) - Elasticsearch修改jvm参数
weixin_30716141的博客
05-12 1121
方法 Elasticsearch默认会配置1G的JVM堆的初始值和最大值，该jvm参数被配置在/config/jvm.options里： -Xms1g -Xmx1g 如果只是个人开发小项目，可以把参数改小些，比如： -Xms512m -Xmx512m 这个jvm.options用来配置各种jvm参数，比如GC、GC logging、heap dumps等。 转载于:https://...
ELK架构介绍
L08130421的博客
08-09 2300
Elasticsearch是一个分布式、高扩展、高实时的搜索与数据分析引擎。它给予Luncene开发，通过RESTful web接口提供全文搜索和分析功能。Logstash是一个开源的服务器端数据处理管理，用于动态地收集、转换和传输数据。Kibana是一个开源的数据分析和可视化平台，是Elastic Stack的一部分。
“怒肝20000字，超详细实战项目----华为云加持：轻松搭建Apache网站，ELK项目实战分享”
weixin_54533548的博客
03-25 2229
经过本次实战项目的深入实施，我们成功借助华为云强大的服务与工具，搭建起了一个功能全面、性能卓越的Apache网站，并实现了日志数据的实时收集与分析。在华为云搭建稳定且强大的网站，使用各种服务对网站进行安全监控，日志分析、流量分析，学会各种软件的使用
【DevOps】日志管理工具 - 22种 选型（读这一篇就够了）
沙师弟专栏
12-30 8170
日志管理工具是为了在生产环境中，有效管理日志数据而提供的灵活、经济、有效的解决方案。现在来盘点下常见的 **22 种** 日志管理工具，调研下它们各自的特点、优缺点、管理架构、效果等，以便可以为业务选择合适的解决方案。
从零搭建一个新系统架构，多活架构方案理解！
SpeedAdmin官方博客
06-28 1243
现在，在进行技术选型的时候，就需要当心了，原因就是最近两年它频繁的爆出安全漏洞，依赖的应用需要跟着频繁的升级版本，修复漏洞。这还只是表象，更为深层次的原因是显现出的安全保障方面的不足，这在技术选型时，是不得不考虑的因素。例如，对于HTTP的GET请求参数超长问题，最合理的解决方案是精简Header参数，但这需要长期的努力，而在短期内很难实现。基于产品的价值，做出决策，并从系统工程架构的演进、技术方案的选型、系统规范共识的达成等方面入手，对实施过程中的常见问题给出了解决思路。记着名字者，不见我真实。
【愚公系列】《AIGC辅助软件开发》041-如何使用 AI技术提升工作效率：AI辅助软件架构师实践
热门推荐
时光隧道
08-15 8万+
在数字化转型的浪潮中，软件架构师作为技术团队的核心，承载着系统设计与架构优化的重要责任。然而，随着项目复杂度的增加和技术环境的变化，架构师面临着前所未有的挑战。幸运的是，人工智能（AI）技术的迅猛发展为这一行业带来了新的机遇，帮助架构师提升工作效率、优化决策过程，并改善团队协作。本文将深入探讨AI如何辅助软件架构师的实际工作，具体分析AI在需求分析、架构设计、代码生成、测试和优化等环节的应用。
微服务 - 高级篇
编程在手天下我有的博客
03-24 1058
本文聚焦微服务高级篇，涵盖多方面关键内容。服务治理中，Consul、Eureka 实现服务注册发现，动态负载均衡策略优化性能，熔断降级保障服务稳定。分布式事务里，2PC、3PC、TCC 各有特点，消息队列与日志系统实现最终一致性。性能优化从代码、资源、缓存着手。安全机制有 OAuth 2.0、JWT 等，监控借助 APM 等工具并设告警。容器化运用 Docker、Kubernetes，CI/CD 流水线实现代码从提交到上线自动化，提升交付效率，助力微服务系统发展。
基于H3C R4900G3的高可用集群搭建：架构师必备知识
本文旨在全面介绍高可用集群的基础知识及其构建方法，并以H3C R4900G3硬件架构为基础，详细探讨了集群软件组件与配置。首先阐述高可用集群的定义、类型、必要性及应用场景，进而分析H3C R4900G3的硬件架构和可靠性...
Allegro X PCB设计小诀窍系列--30.如何在Allegro X中快速删除Dangling Lines?
Xinqiaoe_的博客
12-09 205
在PCB设计过程中，工程师在完成布局布线和设计修改后，通常会遗留一些未连接到任何网络或元件的悬空走线段（Dangling Lines）。这些悬空线段不仅影响设计图纸的整洁性，还可能在线路板制造时产生多余的铜线，引起短路风险，并干扰设计规则检查（DRC）的准确性，增加后期调试与生产的隐患。为此，Allegro X PCB设计工具提供了便捷的快速清理悬空线段功能。
Es索引文档全量更新与迁移
NoviceZ的博客
12-09 269
迁移完成后，校验数据完整性，校验通过后可删除旧索引（如果不需要新索引名称与旧索引名称一致，可不用删除）旧索引删除后，可为新索引创建和旧索引名称一致的别名，后续就可以继续使用旧索引名称进行相关操作。经过测试，方案1的耗时较长（2小时左右），方案2耗时20分钟左右，所以采用方案2进行处理。执行完全量迁移脚本后，可使用下方脚本继续迁移增量数据（在执行全量迁移命令后产生的数据）。2、新建索引并进行全量迁移，迁移时更新新增字段的初始值。执行上述命令后，会返回任务id，可根据返回的任务id查询迁移的进度。
【Git实战】记录一次分支切换失败的排查：Submodule 脏状态与强制切换
丿灬安之若死
12-05 610
摘要：本文记录了一次Git分支切换失败的排查过程。从dev分支切换到main分支后，再切回dev时被卡死，即使执行git reset --hard也无法清除文件修改状态，且子模块显示untracked content。问题根源在于环境差异（CRLF/换行符）和子模块残留文件。解决方案包括：1）使用git checkout -f dev强制切换分支；2）进入子模块执行git clean -fd清理未跟踪文件；3）配置ignoredirty忽略子模块脏状态。文章还提供了Windows环境下的Git配置建议，帮助
Windows 下 Git 常规操作教程：命令行与 TortoiseGit
BI
12-05 926
这篇教程详细介绍了在 Windows 系统上使用 Git 的两种主要方法：图形化工具 TortoiseGit 和传统的命令行。内容涵盖了从初始配置、克隆远程仓库，到日常的更新、提交和推送等一系列核心操作，旨在帮助用户全面掌握 Git 的基本工作流程。
电话号码字母组合
qq_53344479的博客
12-05 407
a b c //将2对应的字符(abc)加入到队列中。ad ae af bd be bf cd ce cf //将3对应的字符(def)加入队列中。这道题是一道很经典的回溯算法题，只要将输入的数字转换成字符串然后再进行排列组合即可得出答案。给出数字到字母的映射如下（与电话按键相同）。的字符串，返回所有它能表示的字母组合。借助队列实现数据的层级遍历。
Spring Boot + Easy-ES 3.0 + Easyearch 实战：从 CRUD 到“避坑”指南
铭毅天下Elasticsearch
12-09 691
Easy-ES 3.0.0 虽然简化了配置，但对 ES 客户端版本的兼容性依然有要求。（简称 EE）作为 ES 界的“MyBatis-Plus”，凭借其强大的 ORM 能力和简洁的 API，正在成为许多 Java 开发者的首选。：Windows 终端默认 GBK，而 Maven 和 Java 都在用 UTF-8，编码不一致导致“鸡同鸭讲”。：Windows PowerShell 下跑 Maven 测试，日志里的中文全是乱码，根本看不懂报错信息。代码写完了，一运行测试用例，往往才是噩梦的开始。
Git版本控制——.gitignore文件
2302_79781252的博客
12-07 872
本文介绍了Git中文件提交和忽略规则的使用方法。主要内容包括：1）git add命令的不同参数（-A、-u、.）对文件提交范围的影响；2）.gitignore文件的格式规范和glob模式匹配规则；3）如何创建和使用.gitignore文件来忽略特定文件类型；4）全局.gitignore的配置方法；5）常见.gitignore规则失效的原因及解决方案；6）提供了Java开发的通用.gitignore模板，包含对编译文件、日志文件、IDE配置等常见忽略项的设置。
clion+RP2040-Zero的ws2812
qq_26074053的博客
12-07 330
默认打印到usb虚拟串口, wokwi 不打印的，所以要手段指定串口引脚才行。
『Git Tag标签+项目远程操作全解：推送、拉取与版本同步实战』
最新发布
2302_79432188的博客
12-09 792
本文介绍了Git标签(Tag)的创建、推送、拉取和删除等操作。主要内容包括：1)使用git tag命令创建轻量级和带附注的标签；2)通过git push origin --tags推送所有标签到远程仓库；3)使用git pull拉取远程标签；4)删除本地和远程标签的方法；5)标签检出的操作步骤。同时还介绍了远程仓库连接建立、分支推送与拉取协作等Git基础操作，帮助开发者实现项目版本的精准标记与团队同步。
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

技术职场教练

您的是我坚持原创免费作品的不懈

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值