GrayLog 设置日志保留时间

最新推荐文章于 2025-04-02 10:58:54 发布
最新推荐文章于 2025-04-02 10:58:54 发布
阅读量4.8k 收藏 1
点赞数
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/allway2/article/details/97926975
本文详细介绍了如何在Graylog中配置文档存储策略，包括选择旋转策略和设置旋转周期，确保文档高效存储与管理。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

System->Indices
Default index set 右侧Edit按钮

Index Rotation Configuration
Graylog uses multiple indices to store documents in. You can configure the strategy it uses to determine when to rotate the currently active write index.

Select rotation strategy
Index Time    ×    
Rotation period (ISO8601 Duration)
    a year
How long an index gets written to before it is rotated. (i.e. "P1D" for 1 day, "PT6H" for 6 hours)

allway2
关注
从0到1上手Graylog运维，轻松拿捏日志管理
大雨的博客
05-25 1420
Graylog 作为一款功能强大的开源日志管理平台，以其开源免费、实时处理、易于扩展、界面友好以及活跃的社区支持等显著优势，在运维领域中占据着重要地位。它不仅能够帮助我们高效地收集、存储和分析海量的日志数据，还能通过直观的可视化展示和及时的告警通知，让我们对系统的运行状况了如指掌，迅速发现并解决潜在问题，为系统的稳定运行提供坚实保障。
Graylog日志系统超详细部署和配置
kim_liao123的博客
09-19 1705
Graylog日志系统部署和配置 1.软件介绍： Graylog是一个开源的日志聚合、分析、审计、展现和预警工具。功能上和ELK类似，但又比ELK要简单，依靠着更加简洁，高效，部署使用简单； 官方文档：https://docs.graylog.org/en/3.3/pages/users_and_roles.html 以下所有部署方式都来源与官方文档 2.软件准备： 服务端： Mongo：存储graylog的一些配置信息 Elasticsearch：存储日志数据，数据持久化，检索 Graylog：grayl
GrayLog 设置日志保留时间每天1个索引，保留183天（6个月）
allway2的博客
01-02 3995
graylog服务配置日志保存时间
weixin_38924998的博客
08-01 778
系统配置--> 设置配置--> 索引设置-->配置索引。
Graylog配置日志保留策略
LB_bei的博客
12-21 1723
找了半天没找到说的清楚的，只能抠官方文档graylog的归档（日志持久化）只有付费版才能用，所以日志只能存在es中。
Graylog-日志系统简介
这有一片海的博客
11-12 8263
Graylog 开源版官网：Graylog是一个开源的日志聚合、分析、审计、展现和预警工具。在功能上来说，和ELK类似，但又比ELK要简单很多。依靠着更加简洁，高效，部署使用简单的优势很快受到许多人的青睐。当然，在扩展性上面确实没有比ELK好，但是其有商业版本可以选择。Input表示日志数据的来源，对不同来源的日志可以通过Extractors来进行日志的字段转换，比如对Nginx访问日志进行字段拆分，解析状态码、URL等数据。然后可以通过pipeline建立数据过滤规则。
pfsense-graylog:由Graylog解析的Pfsense日志
05-01
我们已经在运行Graylog服务器，并且我们将开始准备地形以捕获这些日志记录。 指标 该过程类似于我们对zimbra或鱿鱼所做的过程。 现在，我们在系统/索引中创建Pfsense索引 索引分片4和索引副本0，可以删除索引时间...
Centos使用docker搭建Graylog日志平台
shenxiaomo1688的博客
11-21 1464
GRAYLOG_ROOT_PASSWORD_SHA2=- GRAYLOG_PASSWORD_SECRET=建议分配总系统内存的 50%，但不要超过 32 GB。配置日志保留时间，减少 Elasticsearch 的索引压力。使用 wiredTiger 存储引擎（默认），优化内存利用率。3. 创建 Docker Compose 配置文件。
Graylog日志服务器搭建以及对接飞塔、华为设备（二）——配置篇
Small world
01-26 1144
前言上一篇介绍了Graylog的安装部署，本篇介绍如何进行配置以及接入飞塔和华为设备的syslog日志。介绍本文主要用到的地方是三个：Inputs: 接收源数据Streams: 通过规则将接收到的数据进行筛选过滤Indices: 存储流策略筛选后的日志配置对接Fortigate Friewall1.创建Index SetS...
每日一学——日志管理工具（Graylog）
weixin_61589656的博客
01-03 1931
今天我们要介绍的是Graylog——一款功能强大的日志管理工具。在Graylog中，我们可以使用过滤器（Filters）来筛选日志数据，并使用搜索（Search）功能来查找特定的日志条目。：在Graylog Web界面中，点击左侧菜单中的“Outputs”，然后点击“Create Output”。在Graylog Web界面中，点击左侧菜单中的“Outputs”，然后点击“Create Output”。在Graylog Web界面中，点击左侧菜单中的“Inputs”，然后点击“Create Input”。
graylog+sidecar通过docker-compose部署并采集SSH登录日志
菜鸟运维升级之路
01-03 1022
本篇文章以采集ssh登录日志为例,结合docker、docker-compose对graylog+sidecar采集日志系统的搭建部署、日志采集流程、配置方法做一个详细的介绍,相比于ELK,graylog日志平台在国内比较冷门.能用的知识比较少,只有一个官网博客.但是我维护的项目中实际用的是graylog,对比ELK比较轻量且维护性强。话不多说,开始展示.正则玩的好的话，用graylog会轻松很多的！！
Graylog 中文手册 常用功能和问题整理
建伟博客
11-23 4201
python drf
轻量级分布式日志管理系统Graylog、Loki及ELK的分析和对比
Enweitech Software Works
04-19 9767
1. 为什么需要集中的日志系统？ 在分布式系统中，众多服务分散部署在数十台甚至是上百台不同的服务器上，要想快速方便的实现查找、分析和归档等功能，使用Linux命令等传统的方式查询到想要的日志就费时费力，更不要说对日志进行分析与归纳。 如果有一个集中的日志系统，便可以将各个不同的服务器上面的日志收集在一起，不仅能方便快速查找到相应的日志，还有可能在众多日志数据中挖掘到一些意想不到的关联关系。 作为DevOps工程师，会经常收到分析生产日志的需求。在机器规模较少、生产环境管理不规范时，可以通过分配系统账号，
日志平台--graylog-web配置、接入微服务日志
菜鸟运维升级之路
11-11 9586
通过第三章内容，已成功搭建完成graylog,并且使用nginx实现了反向代理。因此在本章中，主要是针对graylog-web界面的熟悉、配置、微服务日志接入为目标，展开详细说明。以上就是今天要讲的内容，本文对graylog的界面操作做出了大量的讲解，并配合着graylog中的日志转换规则、清洗脚本等，对原本复杂的日志进行简单化处理，拿到自己想看到的日志字段。
Graylog 索引配置详解与优化建议
最新发布
weixin_44876263的博客
04-02 1405
Graylog 作为一款开源日志管理平台，借助 Elasticsearch 存储和检索日志数据，提供实时查询、告警、可视化等功能。如何合理配置索引、分片、副本及轮转策略，不仅直接影响查询性能，还关系到数据安全和存储成本。本文结合常见参数逐一解析其含义、配置方法，并附上注意事项和优化建议，还配以具体示例，助您在实际运维中游刃有余！😊合理配置 Graylog 参数能实现高效、稳定的日志管理。
0-日志平台-graylog放弃&ES术语简介
阿拉斯加大闸蟹的博客
05-17 4574
使用的目的： 从filebeat采集到kafka的数据，在ELK方案中使用的是logstash落到ES 那么在graylog中要实现logstash如下两个重要功能： 1.消息体的解析（包含过滤、剔除、提取，转换） 2.ES的索引映射，ES作为底层的存储，涉及到日至平台性能，因此这个索引映射和存储要把握住 使用的流程： 1.input配置，kafka接入 extractor提取器： 解析json 解析message（不好使） 2.indices、stream配置，ES索引映射写入 .
Graylog 更改显示的时区（Display timezone）
timczm的博客
08-29 2167
每个 Graylog 用户都可以配置他们的显示时区。这会更改用于查看日志消息的时区，但不会更改日志消息的原始时区。默认情况下，Graylog 显示 UTC 格式的所有时间戳。这样调整后重启 Graylog 服务器就可以看到时间是北京时间了。：Admin 的时区只能通过 Graylog 服务器。
elasticsearch 查询大于小于_[日志管理]Graylog进阶 通过Indices自主管理Elasticsearch集群...
weixin_39923137的博客
01-06 704
Graylog的Indices功能主要是用来管理Elasticsearch的shards、replicas、segments，以及Index的轮转规则（按时间、按大小、按行数），保留最大的Index数量。它主要解决两个方面的问题：1、通过在创建的stream中放置判断条件，将日志存储到不同的Index别名中。日志被分配到不同的Index中去了，Index小了，查询自然快了。2、提供更高细粒度的In...
graylog日志清理
03-27
### Graylog 日志清理方法与数据删除配置 Graylog 的日志清理主要依赖于其索引管理机制。Graylog 使用 Elasticsearch 来存储日志数据，因此清理日志实际上是对 Elasticsearch 中的索引进行管理和删除。以下是关于 Graylog 日志清理的具体说明： #### 1. 配置 Index Lifecycle Management (ILM) Graylog 提供了内置的功能来自动管理索引生命周期。可以通过设置保留策略来定期删除旧的日志数据。 - **Index Set 配置**: 在 Graylog Web 界面中导航至 `System` -> `Indices` 页面，找到对应的 Index Set 并编辑它。在 `Rotation strategy` 和 `Retention strategy` 中定义索引轮转和保留规则[^3]。 - Rotation Strategy: 定义何时创建新的索引（例如基于大小或时间间隔）。 - Retention Strategy: 定义何时删除旧的索引（例如超过指定天数或数量限制）。 #### 2. 手动删除索引 如果需要手动清理特定时间段的数据，可以直接删除相应的索引。 - 导航到 `System` -> `Indices` 页面，选择要删除的索引集并点击 `Delete indices` 按钮。注意此操作不可逆，需谨慎执行。 #### 3. 调整 Elasticsearch 设置 Graylog 的日志清理最终由 Elasticsearch 控制。可以在 Elasticsearch 的配置文件中调整以下参数以优化磁盘空间使用： ```yaml indices.lifecycle.delete_after: "30d" ``` 上述配置表示在索引达到 30 天后自动删除。具体路径可能位于 `/etc/elasticsearch/elasticsearch.yml` 文件中[^1]。 #### 4. 清理未分配分片 有时 Elasticsearch 可能会遗留一些未分配的分片，这些也会占用额外的空间。可以运行以下命令强制移除它们： ```bash curl -X DELETE "localhost:9200/_all?expand_wildcards=none" ``` #### 5. 流(Streams)级别的数据控制 对于某些特定流，也可以单独设定保留期限。进入 `Streams` 页面，针对目标流配置规则，并启用高级选项中的 TTL(Time To Live)[^3]。 --- ### 示例代码：批量删除过期索引 通过脚本自动化清理过程更为高效。下面是一个简单的 Python 脚本用于按日期筛选并删除索引： ```python import requests from datetime import datetime, timedelta def delete_old_indices(elastic_url, days_to_keep): cutoff_date = (datetime.now() - timedelta(days=days_to_keep)).strftime('%Y.%m.%d') response = requests.get(f"{elastic_url}/_cat/indices?v&h=index") indices = [line.split()[0] for line in response.text.strip().split('\n')] for index_name in indices: if 'graylog_' in index_name and index_name.split('_')[1] < cutoff_date: print(f"Deleting {index_name}") requests.delete(f"{elastic_url}/{index_name}") delete_old_indices('http://localhost:9200', 30) ``` ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值