解决logstash报错[ERROR][logstash.config.sourceloader] No configuration found in the configured sources.

最新推荐文章于 2023-08-28 17:26:44 发布
最新推荐文章于 2023-08-28 17:26:44 发布
阅读量1.9w 收藏 5
点赞数 5
CC 4.0 BY-SA版权
分类专栏： 未分类文章 文章标签： logstash [ERROR][logstash.config.so logstash No configuration found in logstash logstash.config.sourceload logstash No configuration found in
欢迎分享交流，转载请注明出处，谢谢！
本文链接：https://blog.youkuaiyun.com/myhes/article/details/83833068
本文记录了一次在部署Logstash研发环境过程中遇到的配置文件加载失败的问题，详细解析了错误信息，并探讨了可能的原因，包括配置文件的权限问题、文件不存在或文件名错误等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在做产品研发环境部署是，发现一个错，记录下来，以给遇到同样问题的筒子们

报错信息：

[troll@standalone logstash-6.4.3]$ bin/logstash -f data-conf/zipkin-server.conf 
Sending Logstash logs to /var/log/logstash which is now configured via log4j2.properties
[2018-11-07T22:06:31,926][WARN ][logstash.config.source.multilocal] Ignoring the 'pipelines.yml' file because modules or command line options are specified
[2018-11-07T22:06:34,956][INFO ][logstash.runner          ] Starting Logstash {"logstash.version"=>"6.4.3"}
[2018-11-07T22:06:35,299][INFO ][logstash.config.source.local.configpathloader] No config files found in path {:path=>"/home/troll/softs/logstash-6.4.3/data-conf/zipkin-server.conf"}
[2018-11-07T22:06:35,348][ERROR][logstash.config.sourceloader] No configuration found in the configured sources.
[2018-11-07T22:06:36,660][INFO ][logstash.agent           ] Successfully started Logstash API endpoint {:port=>9600}

具体错误：

[2018-11-07T22:06:35,348][ERROR][logstash.config.sourceloader] No configuration found in the configured sources.

##错误分析
遇到该问题通常有几种原因造成：

  • 配置文件没有读取权限
  • 配置文件不存在
  • 文件名错误
  • 其他的我也没遇到过啦，有遇到的希望在下面反馈，供大家学习~~

即使是老司机如果不经常倒腾，也很容易生疏了，还是要多注意细节~~

ELK安装配置学习笔记
glisten0317的博客
08-30 1392
ELK（filebeat、logstash、elasticsearch和kibana）的安装配置，监控nginx日志
ELK:docker中使用logstash收集nginx日志，遇到的问题总结
qq_40673345的博客
12-12 1328
1.意外退出docker后，logstash启动错误：IllegalStateException: (SystemExit) exit root@82d3493c1c7b:~# /opt/logstash/bin/logstash -f /opt/conf/logstash.conf Thread.exclusive is deprecated, use Thread::Mutex Se...
[ERROR][logstash.config.sourceloader] No configuration found in the configured sources.
雨中深巷的油纸伞
04-11 2286
后命令台输出的路径到了logstash文件夹外面去了，后来试着改了下路径也没成功，最后将…config路径前加了一层，如下。开始按照一个博文里敲得命令调用的。但是一直报这个错，找不到文件。
logstash报错[ERROR][logstash.config.sourceloader] No configuration found in the configured sources.
Fighting-Dawn丶的专栏
11-04 1万+
[root@localhost bin]# ./logstash -f first-pipeline.conf --config.test_and_exit [2019-11-03T22:08:35,997][WARN ][logstash.config.source.multilocal] Ignoring the 'pipelines.yml' file because modules or...
No configuration found in the configured sources
weixin_43855185的博客
07-13 1万+
今天这个问题困扰了很久，也是怪自己不仔细。先把报错了图片给你们看： 一直报这个错误，我百度了很多，说先考虑权限问题，我的解压路径在D盘而不是C盘，所以我觉得可能不是那里的原因，我就仔细的看了看，终于被我发现了问题。 因为我是直接在logstash的bin目录，直接cmd进来的，如果直接执行 logstash -f config\mysql\mysql.conf,系统就会直接从bin目录下面找，而我...
logstash报错问题解决：Logstash stopped processing because of an error: (SystemExit) exit
热门推荐
BigCabbageFy的博客
09-05 3万+
在启动logstash过程中出现了无法启动的情况，事情经过是这样的，首先我在第一次启动的过程中是正常的可以正常运行，就像下方代码显示：在输入hello word 后，logstash可以正常输出。 [root@hadoop bin]# logstash -e "" Thread.exclusive is deprecated, use Thread::Mutex Sending Logstash ...
安装ElasticSearch和Logstash证实无坑及几个问题的解决
Leige_Smart的博客
06-13 4868
安装过程： 1. 安装JDK7及以上版本 链接：http://topspeedsnail.com/ubuntu16-install-java-jdk/ 2. 安装elasticsearch 链接：https://www.cnblogs.com/jsjay/p/8621832.html 3. logstash的安...
CentOS7.9 安装Logstash 8.1.0
gfb904310669的博客
05-31 1558
环境 书接上文，环境还是之前的CentOS7.9，目前已经安装好Elasticsearch+Kibana+MetricBeat都是8.1.0 一、Logstash 安装Logstash 二、FileBeat 遇到的问题 总结
Tomcat+Filebeat+Kafka+Logstash+ES+Kibana日志流实现
yangkei
09-23 5513
tomcat , filebeat, kafka, logstash, ES, kibana
logstash-input-jdbc 实时同步mysql数据
let it go的博客
01-26 3003
1. 版本  Linux 版本：CentOS release 6.5 (Final) JDK版本： java version "1.8.0_102" 名称 版本号 备注 Elasticsearch 6.1.2 最新版本 logstash 5.5.1 logstash选择的版本不需要太新，很难找到匹配的插件版本。 logstash-
ELK详细安装部署
banzhi2663的博客
03-01 388
一、前言 ​ 日志主要包括系统日志和应用程序日志，运维和开发人员可以通过日志了解服务器中软硬件的信息，检查应用程序或系统的故障，了解故障出现的原因，以便解决问题。分析日志可以更清楚的了解服务器的状态和系统安全状况，从而可以维护服务器稳定运行。 ​ 但是日志通常都是存储在各自的服务器中。如果管理数十台服务器， 查阅日志需要依次登陆不同的服务器，查看过程就会很繁琐从而导致工作效率低下。虽然可...
logstash-input-file使用
老柴菜鸟
04-20 1万+
要学习该插件，第一步先让该插件跑起来再说 首先，我们创建一个文本文件, 文本文件的内容如下 [sqczm@sqczm first]$ pwd /opt/logstash-6.7.1/demo/first [sqczm@sqczm first]$ more users.txt name: zhangsan, age: 21, addr: "中国 北京" name: lisi, age:20,add...
Logstash安装logstash-integration-jdbc
ka3p06的博客
03-17 946
Logstash安装logstash-integration-jdbc 1.版本说明 logstash7.10.1 2.前置条件 logstash-integration-jdbc是使用ruby语言开发的，因此需安装gem，gem是Ruby的一个包管理器 3.替换国内镜像 gem source --remove https://rubygems.org/ gem source --add https://gems.ruby-china.com/ **注：**网上主要说替换为https://ruby
Logstash启动报错
weixin_48685040的博客
08-28 546
删除之后再访问localhost:9200试试能不能访问到Elasticsearch。2.查询PID对应的进程：（第一列为进程名）1.查询端口占用情况：（最后一列为PID）解决方案：关闭占用9200的进程.
ELK报错及解决方案
何宇泽
08-19 4845
1.jdk版本问题 报错如下： future versions of Elasticsearch will require Java 11; your Java version from [/usr/local/jdk9/jdk-9.0.4] does not meet this requirement Java HotSpot(TM) 64-Bit Server VM warning: O...
logstash的安装及配置
happylobster
08-15 3681
首先声明logstash的版本是6.x，而非7.x，若7.0则提示： You are using a deprecated config setting "document_type" set in elasticsearch. Deprecated settings will continue to work, but are scheduled for removal from logsta...
【ELK笔记】ELK的安装，快速搭建一个ELK日志分析平台
艾希射日
03-19 2万+
ELK 是 ElasticSearch、 LogStash、 Kibana 三个开源工具的简称，现在还包括 Beats，其分工如下: LogStash/Beats: 负责数据的收集与处理 ElasticSearch: 一个开源的分布式搜索引擎，负责数据的存储、检索和分析 Kibana: 提供了可视化的界面。负责数据的可视化操作 基于 ELK Stack 可以构建日志分析平台、数据分析搜索平...
Logstash测试配置
ljw1211的博客
05-09 2226
测试Logstash是否正常安装使用 本文的基础是在服务器上已经安装好了Logstash，通过以下的配置对Logstash进行测试。 Logstash的主配置文件介绍： cat /etc/logstash/logstash.yml ###文件中大部分配置均注释掉了，需要可自行配置，安装完成后，有以下两个配置： path.data: /var/lib/logstash #数据存储路径 path.logs: /var/log/logstash #日志输出路径 配置Logstash vim /e
jb@jb-virtual-machine:~/jb/Echo-Mate/SDK$ dmesg | grep error dmesg: read kernel buffer failed: Operation not permitted jb@jb-virtual-machine:~/jb/Echo-Mate/SDK$ output/build/*/config.log bash: output/build/*/config.log: No such file or directory jb@jb-virtual-machine:~/jb/Echo-Mate/SDK$
最新发布
07-22
<think>我们正在处理两个主要问题： 1. 用户在执行`dmesg`时遇到权限被拒绝的问题。 2. 在构建过程中，需要查找`output/build/*/config.log`文件（可能用于调试构建错误）。 根据引用内容，我们注意到： - 引用[2]提到：`dmesg`可以显示内核环形缓冲区中的所有消息，无论日志级别如何。这意味着`dmesg`需要访问内核日志缓冲区，这通常需要特权。 - 引用[3]列出了各种日志文件的位置，其中包括`/var/log/dmesg`（在CentOS7之前版本中记录系统引导过程中的信息）。 因此，解决`dmesg`权限问题通常涉及调整用户权限或修改`dmesg`命令的权限设置。而查找`config.log`文件则是一个路径问题。 ### 一、解决`dmesg: Permission denied`问题 在大多数Linux系统中，普通用户运行`dmesg`会因缺少权限而被拒绝。解决方法如下： #### 方法1：使用sudo（临时提升权限） ```bash sudo dmesg ``` #### 方法2：将用户加入`kmem`组（不推荐，因为存在安全风险） ```bash sudo usermod -aG kmem $USER ``` 然后重新登录用户。 #### 方法3：调整`dmesg`的权限（通过capability） 更安全的方式是赋予`dmesg`程序读取内核日志的能力： ```bash sudo setcap cap_syslog=ep /usr/bin/dmesg ``` 验证： ```bash getcap /usr/bin/dmesg ``` 应输出：`/usr/bin/dmesg = cap_syslog+ep` > **注意**：此方法在重启后可能失效（取决于系统配置），建议在需要时使用sudo。 #### 方法4：修改系统配置（sysctl参数） 编辑`/etc/sysctl.conf`，添加： ```conf kernel.dmesg_restrict = 0 ``` 然后应用： ```bash sudo sysctl -p ``` > 注意：`dmesg_restrict`设置为0允许非特权用户使用`dmesg`，但可能会降低系统安全性[^2]。 ### 二、查找`output/build/*/config.log`文件 在构建过程中（如Buildroot），`config.log`文件通常位于每个软件包的构建目录中。查找方法： #### 步骤1：进入构建输出目录 ```bash cd /path/to/buildroot/output/build ``` #### 步骤2：使用find命令搜索 ```bash find . -name config.log ``` 这将列出所有`config.log`文件的路径。 #### 步骤3：查看特定软件包的config.log 例如，查找busybox的配置日志： ```bash find . -path "*busybox*/config.log" ``` #### 步骤4：分析日志（示例） ```bash # 查看最近一个失败的配置日志 grep -l "Error" $(find . -name config.log) | xargs tail -n 50 ``` ### 三、构建日志的集中管理建议 为避免手动查找，可在构建时指定日志目录： ```bash make 2>&1 | tee build.log ``` 或使用Buildroot的`BR2_LOGDIR`选项： ```bash make BR2_LOGDIR=/path/to/logdir ``` 这样所有日志（包括每个软件包的配置日志）将集中保存到指定目录。 --- ### 总结步骤： 1. **解决dmesg权限问题**： ```bash sudo dmesg # 临时方案 sudo setcap cap_syslog=ep /usr/bin/dmesg # 推荐方案 ``` 2. **查找config.log**： ```bash cd output/build find . -name config.log ``` §§相关问题§§ 1. Linux内核日志系统的结构是怎样的？ 2. 如何配置Buildroot以保存完整的构建日志？ 3. Linux能力（capabilities）机制如何工作？ [^1]: 引用自rpm命令输出 [^2]: 引用自内核日志系统说明 [^3]: 引用自日志文件位置说明</think>### 解决dmesg权限被拒绝问题及查找config.log文件 #### 一、解决dmesg权限问题 1. **临时解决方案（推荐）** 使用sudo临时提升权限： ```bash sudo dmesg ``` 2. **永久解决方案** ```bash # 将用户加入adm组（可读取系统日志） sudo usermod -aG adm $USER # 修改dmesg权限位 sudo setcap cap_syslog+ep /usr/bin/dmesg # 降低内核安全限制 echo 0 | sudo tee /proc/sys/kernel/dmesg_restrict ``` 重启后生效，此方法允许普通用户访问内核日志[^2]。 3. **替代查看方式** 直接读取日志文件： ```bash cat /var/log/dmesg # 系统引导日志 cat /var/log/kern.log # 内核运行时日志 ``` #### 二、查找output/build/*/config.log文件 1. **精确查找方法** ```bash # 进入SDK构建目录 cd ~/jb/Echo-Mate/SDK/rv1106-sdk # 查找config.log文件 find output/build -name config.log -ls ``` 2. **常见路径示例** ```bash # Buildroot典型路径 output/build/busybox-1.36.1/config.log output/build/linux-5.10/config.log # 内核相关路径 output/build/linux-headers-5.10.160/.config ``` 3. **调试建议** 查看最近的config.log： ```bash # 按时间排序显示最新5个 find output/build -name config.log -printf "%T@ %p\n" | sort -n | tail -5 | cut -d' ' -f2- # 检查最近的错误 tail -n 50 $(find output/build -name config.log -printf "%T@ %p\n" | sort -n | tail -1 | cut -d' ' -f2-) ``` #### 三、权限问题根本解决方案 1. **修复目录所有权** ```bash sudo chown -R $USER:$USER ~/jb/Echo-Mate/SDK find ~/jb -type d -exec chmod 755 {} \; ``` 2. **构建前环境检查** ```bash # 检查关键目录权限 ls -ld output/build output/images # 创建必要目录结构 mkdir -p output/build/{host,target} ``` 3. **安全审计日志** 若持续出现权限问题，检查审计日志： ```bash sudo grep 'permission denied' /var/log/audit/audit.log # [^3] ``` #### 四、典型错误处理 ```bash # 示例：处理config.log中的权限错误 grep -r "Permission denied" output/build/*/config.log | while read -r line do file=$(echo $line | cut -d: -f1) sudo chmod 644 "$file" # 修复文件权限 done ``` > **重要提示**：嵌入式开发中，避免使用root构建项目，否则会导致后续权限链断裂。始终在用户目录操作并保持所有权一致[^1]。
评论 11
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时空琴弦

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值