关于kibana查询elasticsearch的index提示Courier Fetch: 4 of 6 shards failed.处理方法

公司使用Elastic Stack收集、处理nginx日志。

使用kibana查询nginx日志时,发现无法通过host:nginx003.ecs.east1-e来查询对应服务器的nginx日志。页面提示Courier Fetch: 4 of 6 shards failed

查看kibana日志没有发现特殊的错误;

查看elasticsearch日志发现有如下日志:

[2017-11-29T11:01:28,570][DEBUG][o.e.a.s.TransportSearchAction] [storm3] [23646] Failed to execute fetch phase
org.elasticsearch.transport.RemoteTransportException: [es5][*.*.*.*9200][indices:data/read/search[phase/fetch/id]]
Caused by: java.lang.IllegalArgumentException: Fielddata is disabled on text fields by default. Set fielddata=true on [parameters.createTimeStart] in order to load fielddata in memory by uninverting the inverted index. Note that this can however use significant memory. Alternatively use a keyword field instead.
        at org.elasticsearch.index.mapper.TextFieldMapper$TextFieldType.fielddataBuilder(TextFieldMapper.java:336) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.index.fielddata.IndexFieldDataService.getForField(IndexFieldDataService.java:111) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.search.fetch.subphase.DocValueFieldsFetchSubPhase.hitExecute(DocValueFieldsFetchSubPhase.java:64) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.search.fetch.FetchPhase.execute(FetchPhase.java:165) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.search.SearchService.executeFetchPhase(SearchService.java:426) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.action.search.SearchTransportService$12.messageReceived(SearchTransportService.java:407) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.action.search.SearchTransportService$12.messageReceived(SearchTransportService.java:404) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.transport.RequestHandlerRegistry.processMessageReceived(RequestHandlerRegistry.java:69) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.transport.TcpTransport$RequestHandler.doRun(TcpTransport.java:1539) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.common.util.concurrent.ThreadContext$ContextPreservingAbstractRunnable.doRun(ThreadContext.java:638) ~[elasticsearch-5.6.3.jar:5.6.3]
        at org.elasticsearch.common.util.concurrent.AbstractRunnable.run(AbstractRunnable.java:37) ~[elasticsearch-5.6.3.jar:5.6.3]
        at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) ~[?:1.8.0_73]
        at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) ~[?:1.8.0_73]
        at java.lang.Thread.run(Thread.java:745) [?:1.8.0_73]

根据错误提示,是parameters.createTimeStart这个字段要设置下fielddata=true 

在kibana的Dev tools设置下索引的字段:

PUT nginx*/_mapping/logs/

"properties": { 
  "parameters.createTimeStart": { 
    "type":     "text",
    "fielddata": true 


}

同时需要在_template里面添加上面的字段,这样每天就会自动设置到索引里面了。

再在kibana里面查询,如果还有问题,再参照同样的方式设置即可!


<think>嗯,用户现在遇到了Kibana的问题,具体是server.publicBaseUrl缺失的错误。之前他们提到了在CentOS 7上创建索引模式snort-alerts-*并查看Snort警报的步骤,现在转向了Kibana安装后的配置问题。日志显示Kibana反复启动和停止,但用户需要检查命令是否出错和执行是否成功。 首先,我需要确定用户的问题核心。用户可能已经安装了Kibana,但在配置过程中遗漏了server.publicBaseUrl的设置,导致服务无法正确启动。查看提供的日志,虽然Kibana进程在启动,但可能因为配置错误导致服务不稳定,或者用户没有正确访问Kibana的界面。接下来,我应该验证Kibana的配置文件,通常是kibana.yml。检查server.host、server.port以及server.publicBaseUrl是否正确设置。如果publicBaseUrl未配置,Kibana可能无法生成正确的URL,影响前端访问。此外,确保Elasticsearch运行正常,并且Kibana能连接到它,否则也会导致问题。 另外,用户可能没有开放5601端口,或者防火墙设置阻止了访问,导致服务虽然运行但无法被外部访问。需要检查防火墙规则和SELinux状态。同时,查看Kibana的详细日志,使用journalctl -u kibana -xe或查看Kibana的日志文件,以获取更具体的错误信息。 用户可能执行了systemctl restart kibana命令,但需要确认配置更改后是否重新加载了服务。此外,权限问题也可能导致Kibana无法正确启动,例如Kibana用户是否有权限访问相关文件和目录。 最后,建议用户逐步排查:先检查配置文件,然后验证网络和端口,再查看详细日志,最后考虑其他可能因素如版本兼容性或系统资源限制。</think>Kibana报错`server.publicBaseUrl缺失`通常是由于配置文件中缺少必要参数或格式错误导致的。以下是解决方案: --- ### 解决方案步骤: 1. **修改Kibana配置文件**: ```bash sudo vi /etc/kibana/kibana.yml ``` 添加以下关键配置(根据你的实际环境修改): ```yaml server.host: "0.0.0.0" # 允许外部访问 server.port: 5601 server.publicBaseUrl: "http://你的服务器IP或域名:5601" # 关键配置项 elasticsearch.hosts: ["http://localhost:9200"] ``` 2. **重启Kibana服务**: ```bash sudo systemctl restart kibana ``` 3. **验证服务状态**: ```bash sudo systemctl status kibana # 检查是否运行 journalctl -u kibana -f # 查看实时日志 ``` --- ### 完整排查流程: 1. **检查端口占用**: ```bash netstat -tulnp | grep 5601 # 确认端口未被其他进程占用 ``` 2. **验证Elasticsearch状态**: ```bash curl http://localhost:9200 # 确保ES正常运行 ``` 3. **检查防火墙规则**: ```bash firewall-cmd --list-ports # 查看开放端口 sudo firewall-cmd --add-port=5601/tcp --permanent # 开放端口 sudo firewall-cmd --reload ``` --- ### 典型错误日志分析: 您提供的日志显示Kibana反复重启但未报错,这说明: - 服务能正常启动但可能无法保持运行 - 常见原因可能是: - 内存不足(查看`free -h`) - 配置文件存在语法错误 - Elasticsearch连接超时 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值