ELK日志

最新推荐文章于 2025-01-04 20:21:27 发布
最新推荐文章于 2025-01-04 20:21:27 发布
阅读量636 收藏
点赞数
文章标签： elk elasticsearch 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/yanjun52015/article/details/126143204
版权

安装部署ELK，并收集tomcat，nginx日志
(1)环境准备
三台虚拟机
在这里插入图片描述
（2）配置hosts解析和时间同步
在这里插入图片描述
在这里插入图片描述
（3）部署jdk
在这里插入图片描述在这里插入图片描述
（4）安装配置elasticsearch集群
在node1上配置
目录：/etc/elasticsearch/elasticsearch.yml
在这里插入图片描述
(5)配置head插件
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述访问IP:9100就能看到我们集群信息

在这里插入图片描述
（6）安装装Bigdesk插件和cerebro插件
在这里插入图片描述
在这里插入图片描述
在node2和node3上同样下载elasticsearch集群和两个插件
并将node1上的配置文件传给node2和node3
在这里插入图片描述
最后
在这里插入图片描述
访问web页面，端口分别为9000和8000
在这里插入图片描述
在这里插入图片描述
至此ELK部署完成！

filebeat收集nginx的json格式日志
1、filebeat配置
在这里插入图片描述

2、nginx配置（修改日志格式）
在这里插入图片描述
3、logstash配置
在这里插入图片描述
4、测试
在这里插入图片描述

在这里插入图片描述

ELK——ELK+filebeat+kafka部署——（1）部署ELK
w1206507055的博客
06-15 759
部署ELK
ELK集群搭建(基础教程)
lqcbj的博客
01-30 3690
ELK集群搭建(基础教程) 目录： 机器准备 集群内各台机器安装Elasticsearch 安装部署Kafka（注：每个节点都配置，注意ip不同） 安装logstash工具 安装filebeat ELK收集Nginx的json日志 ELK收集Nginx正常日志和错误日志 ELK收集Tomcat日志 ELK收集docker日志 配置filebeat收集单个docker日志 modules日志收集 使用redis作为缓存收集日志 使用Kafka做缓存收集日志
ELK：SpringBoot整合ES版本端口号踩坑记录
小白的专栏
04-15 501
项目中需要使用Spring Boot和Elasticsearch，es版本为6.7.2，需要发布版本了，凌晨一点，凌晨两点，三，四…第二天早上七点，发布失败了 T_T 第一步：版本对应关系 Spring Boot整合了ElasticSearch，只需要引入Spring Data Elasticsearch即可 <dependency> <groupId>org.springframework.data</groupId> <artifactId>spr
ELK入门——ELK详细介绍（ELK概念和特点、Elasticsearch/Logstash/beats/kibana安装及使用介绍、插件介绍）
热门推荐
Netceor的博客
03-11 4万+
主要参考链接 ES内容大全（Elastic中国社区官方博客） ES视频教程（Elastic中国社区官方博客） Elastic相关软件和插件（官网） ES中文社区（讨论和提问） 我的ELK专栏 Linux操作（鸟哥的私房菜） Linux常用命令 一、什么是ELK（端口9200） ELK学习总结——我们为什么要用ELK 一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢
【ES专题】ElasticSearch集群架构剖析
qq_32681589的博客
11-05 4566
使用何种通信协议去同步数据，互相通信采用何种策略同步数据（异步还是同步）如何保证一致性，保证到什么程度（【最终一致性】 or【实时一致性 / 强一致性】）使用何种算法去选举主次节点（感觉这个比较随意，通常为了快速恢复服务，选举流程是怎么快怎么来，但是不能出现【脑裂问题】）
Centos7下搭建ELK日志分析系统
11-02
【Centos7下搭建ELK日志分析系统】 ELK栈是日志管理和分析的强大工具，由Elasticsearch、Logstash、Kibana三个组件组成。Elasticsearch是一个分布式的实时搜索和分析引擎，用于存储、分析和检索大量数据。Logstash...
ELK日志收集系统.docx
01-16
总结来说，ELK日志收集系统是一个强大的日志管理和分析工具，它提供了从收集、传输、存储到分析的全套解决方案，帮助企业或组织有效地管理和理解其系统的日志数据。通过优化配置和合理选择架构，可以应对大规模数据...
ELK日志分析平台一键部署脚本
08-01
ELK日志分析平台一键部署脚本 架构：logstash+elasticsearch+kibana 功能：shell脚本一键部署 亲测有用！！！
ELK日志分析系统.pptx
01-04
ELK Stack 日志分析系统 ELK Stack 是一个开源的日志分析系统，由 Elasticsearch、Logstash 和 Kibana 三个组件组成。该系统能够实时地收集、存储和分析日志数据，并提供可视化的查询和分析功能。 ELK Stack 的...
elk日志系统部署及实践
09-29
ELK日志系统是目前广泛使用的集中式日志解决方案，由三个强大的开源工具组成，分别是Elasticsearch、Logstash和Kibana。在IT运维和系统监控领域，日志数据的集中管理和分析变得尤为重要。传统的单机日志管理方式难以...
探索 INFINI Console：提升 Elasticsearch 管理效率的新利器
最新发布
铭毅天下Elasticsearch
01-04 1754
1、常见的 Elasticsearch 可视化客户端介绍1.1 Head 插件这是一个非常老牌的 Elasticsearch 可视化插件（现在改名了 Multi Elasticsearch Heads），通常以 Chrome 插件或网页形式存在，用来查看集群的节点状态、索引元数据，也能在界面里直接执行查询请求。地址：chrome-extension://cpmmilfkofbeimbmgicl...
ELK日志服务搭建和配置-详解
weixin_35252069的博客
08-03 806
ELK日志框架搭建详解
ElasticSearch的9200端口和9300端口区别
wade1010的专栏
10-13 2123
9200用于外部通讯，基于http协议，程序与es的通信使用9200端口。 9300jar之间就是通过tcp协议通信，遵循tcp协议，es集群中的节点之间也通过9300端口进行通信。
ElasticSearch 9200和9300端口的作用
生命中有太多不确定
09-25 8466
作用 9300端口： ES节点之间通讯使用 9200端口： ES节点 和 外部 通讯使用 浏览器访问9300端口测试 外部无法从9200端口中获得任何信息 浏览器访问9200端口测试 外部通过访问9200端口，可以得知Elasticsearch集群的相关信息，因此外部可以根据这些信息看来进行连接。 结论 9300是TCP协议端口号，ES集群之间通讯端口号 9200端口号，暴露ES RESTful接口端口号 转载于:https://www.cnblogs.com/pickKnow/p/1145041
Elasticsearch安全加固
hello world
02-07 645
①不对外开放端口、不公网裸奔 操作如下： 默认开启的 9200 端口（ES）、5601 端口（Kibana）、9000 端口（cerebro）、5000 端口（ElasticHQ）等 ELK stack 相关端口不对外公布。 尽量内网环境运行，不公网裸奔。 如果要映射开放端口，要限定好指定 IP 访问，用完后关闭端口映射。 ②升级高版本 Elasticsearch，使用 X-pack 基础安全功能 Elasticsearch 7.1&6.8 版本之后，X-pack 基础安全功能免费。 这意味着：
ElasticSearch 搜索集群
qq_36223903的博客
09-24 1297
搜索的目的：让公开的信息易于查找。ES简介elasticsearch是一个底层基于Lucene的实时的分布式搜索和分析引擎。 es被设计用于云计算中，为分布式而生。 优点：实时搜索，稳定，可靠，快速，安装使用方便。
ElasticSearch基础介绍：5:可视化工具之cerebro
知行合一 止于至善
08-05 3万+
使用curl等客户端工具即可通过Restful API对Elasticsearch进行操作，但也有一些客户端工具提供对于ElasticSearch更加友好的可视化操作支持，比如cerebro。这篇文章介绍一下如何使用cerebro对Elasticsearch7.3.0版本进行操作。
ElasticSearch性能调优
gt9000的博客
03-01 1126
文章内容 ElasticSearch性能调优 大家好，我是皮蛋二哥。“ELK”是ElasticSearch、Logstash、Kibana三门技术的简称。如今ELK技术栈在互联网行业数据开发领域使用率越来越高，做过数据收集、数据开发、数据存储的同学相信对这个简称并不陌生，而ElasticSearch（以下简称ES）则在ELK栈中占着举足轻重的地位。前一段时间，我亲身参与了一个ES集群的调优，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值