龊事一桩，解决 scsi 4:0:0:0: rejecting I/O to dead device

最新推荐文章于 2024-06-14 14:31:09 发布
最新推荐文章于 2024-06-14 14:31:09 发布
阅读量1.4w 收藏 3
点赞数 1
CC 4.0 BY-SA版权
分类专栏： @Linux/BSD/Unix/Win 文章标签： 数据备份 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/phphot/article/details/3949014
本文记录了一次服务器遇到I/O错误的问题排查与解决过程。作者通过检查系统日志发现了问题的根源在于不当的USB设备使用，并采取了一系列措施解决了问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

今天登陆我们一台在上海的服务器，有同事说ftp无法正常上传文件，我想先看下分区的情况，于是：
df -h了一下，发现错误：
df: `/mnt': Input/output error
我吓了一条，dmesg了下，这下更的冷汗直冒:
scsi 4:0:0:0: rejecting I/O to dead device
FAT: Directory bread(block 32) failed
scsi 4:0:0:0: rejecting I/O to dead device
FAT: FAT read failed (blocknr 1)
scsi 4:0:0:0: rejecting I/O to dead device
FAT: FAT read failed (blocknr 1)
满屏这个信息，一般看到I/O err然后再来个read-only，基本上硬盘是出现物理坏道了，以前管理discuz！虚拟主机的两年中碰到过几次

这个时候我很紧张数据，赶紧把剩余的数据备份掉！！！速度很慢，等待中，我仔细检查了下系统日志。

 

我惊奇的发现：
Initializing USB Mass Storage driver...

MD，谁在我们机器上装过USB设备？ 是谁！！！！！ 我随便问了一下，同事告诉我，是edong那边要给我们装什么备案软件，需要提供机器的密码给他们，而我今天出去开会了，给过了，那问题清晰了! 长舒了一口气啊~~~
赶紧umount /mnt
umount: /mnt: device is busy

edong那帮人啊！
fuser /mnt 看了下是哪个进程使用此设备
fuser -km /mnt 强行干掉所有使用此设备的进程
umount /mnt

搞定！

今天突然发现一台机器报rejecting I/O to offline device
weixin_33806509的博客
06-08 2303
1、一台四节点的机器，共三块硬盘，前两块做RAID1，突然发现报大量如下错误，系统不可用，不知道什么原因： rejecting I/O to offline device 2、每打一个命令，提示 [root@localhost ~]# reboot -bash: /sbin/reboot: 输入/输出错误 [root@localhost ~]# lsb_rel...
Linux问题解决方案 | rejecting I/O to dead device（文末有福利）
看那个码农的博客
10-29 1755
本篇推文共计1000个字，阅读时间约1分钟。近日，由于电脑出现了一些问题，耽搁了办公的进度，并且网上关于此问题的解决方案较少，所以我根据遇到的问题及其解决方案做了一个详细的说明描述，供读...
磁盘rejecting I/O to offline device故障导致4TB生产数据库无法访问
weixin_41561946的博客
02-02 8469
1、项目背景 2、故障描述 Jan 31 03:47:03 test-db-2 kernel: sd 1:2:0:0: rejecting I/O to offline device Jan 31 03:49:47 test-db-2 kernel: sd 1:2:0:0: rejecting I/O to offline device Jan 31 03:49:47 test-db-2 kernel: sd 1:2:0:0: rejecting I/O to offline device Jan 31 0
服务器连接不上 报sd 0:2:0:0 rejectintg I/O to offline device 错误
摩西莫西
11-04 4695
CentOS 外部ping不了 显示器显示： sd 0:2:0:0 rejectintg I/O to offline device sd 0:2:0:0 rejectintg I/O to offline device sd 0:2:0:0 rejectintg I/O to offline device sd 0:2:0:0 rejectintg I/O to offline de...
mmcblk0: error -1 sending status command, aborting
庄山浪水
12-19 2140
[ 349.289402] end_request: I/O error, dev mmcblk0, sector 60907 [ 350.442026] mmcblk0: error -1 sending status command, retrying [ 350.448746] mmcblk0: error -1 sending status command, aborting ...
【系统救援】CentOS7启动失败：报I/O error metadata corruption detected错误
lingmeng447的专栏
06-14 1360
然后执行xfs_repair /dev/sda3 进行修复。如果无法修复则执行xfs_repair -L /dev/sda(清空日志，可能会丢失文件)定位到ro 然后修改ro为rw(“rw init=/sysroot/bin/sh”)，使用下面的提示使用“Ctrl-x进入救援模式。所以开机以后就无法使用系统，或无法修复已经挂在的磁盘。链接：https://www.jianshu.com/p/ab5b374076dd。进入单用户模式后先输入 umount /dev/sda3 卸载磁盘。
OKhttp Rejecting re-init on previously-failed class Failed resolution of: Lorg/conscrypt/Conscrypt
duty_is_codeing的专栏
11-11 7669
OKhttp 请求异常 记录在使用okhttp异步请求是出现异常的情况 13826-13938 I/zygote64: Rejecting re-init on previously-failed class java.lang.Class<okhttp3.internal.platform.ConscryptPlatform$configureTrustManager$1>: jav...
解决：“/var/run/postgresql/.s.PGSQL.5432“ failed: No such file or directory
Kizai的博客
12-17 4146
解决psql: error: connection to server on socket "/var/run/postgresql/.s.PGSQL.5432" failed: No such file or directory
the remote participant disconnwct！ipaddr:0.0.0.0,processid:0
最新发布
08-16
iptables -I INPUT -s 0.0.0.0/0 -j LOG --log-prefix "IP_0.0.0.0_ACCESS" ``` 2. **优化服务端连接处理**： - 在引用[1]的`room.Join`调用前添加验证： ```go if participant.GetRemoteAddr().IsUnspecified...
调试经验 - Fat文件打开失败的问题
lcokenm的专栏
07-14 1617
问题描述在M7上调试打开SD卡中的某个文件，并读取内容的过程中，发现在SD卡中存在的一个文件firmware.bin，通过open接口访问时，出现访问失败的问题。排查过程发现f_open()中传入的open_flag为FA_READ | FA_WRITE时，打开一个已经存在的文件没有问题，可以正常访问并调用f_write()和f_read()进行读写文件，但是当需要重写这个文件时，通过f_close
FAT文件管理系统出现错误 FR_DISK_ERR
xuguangming03的博客
02-14 2485
主要时在该函数中返回值一定要设置成 DRESULT disk_ioctl ( BYTE pdrv, /* Physical drive nmuber (0..) */ BYTE cmd, /* Control code */ void *buff /* Buffer to send/receive control data */ ) { DRESULT res; // int res...
嵌入式linux插拔usb系统重启,嵌入式linux实现即插即用（热插拔）USB盘问题
weixin_26833939的博客
05-09 471
如果我要实现即插即用(热插拔)USB盘，我还需要怎么做谢谢高手们指点。下面是我已经实现的功能和打印信息：BusyBox v1.2.1 (2007.09.12-03:35+0000) Built-in shell (ash)Enter 'help' for a list of built-in commands.~ # usb 1-1: new full speed USB device using...
dell服务器在redhat5.2上会出现硬盘无辜掉线的情况
congsikuai0611的博客
10-16 1084
一，dell 2970的服务器突然出现系统不能使用，dmesg信息出现：sd 0:2:0:0: rejecting I/O to offline devicesd 0:2:0:0: rejecting I/O to offlin...
Linux访问报Input/output error处理步骤一例
11-28 8623
背景：redhat7.4版本操作系统，收到磁盘告警。更换磁盘后检查系统，发现/opt无法查看内容。 1、先尝试保存metadata，不行则继续下一步(如果磁盘很大，那metadata可能也很大，如一块34T的盘，执行时提示需要500G+） xfsdump -l 0 -L opt_all -M opt_data_all -f opt_fs_metadata.dump /opt 2、通过losf 和 ps -ef找到之前和磁盘目录打开的文件、相关的进程，kill掉 3、umount /opt ..
Input/output error
qq_38335768的博客
09-06 4602
Traceback (most recent call last): File "./scripts/create_lmdb.py", line 143, in <module> create_lmdb(args.dataset, raw_dir, lmdb_dir, filter_file) File "./scripts/create_lmdb.py", line 65, in create_lmdb txn.commit() lmdb.Error: mdb_txn_
5.磁盘阵列卡损坏
weixin_43346403的博客
02-16 1653
磁盘阵列卡损坏
es收集日志报错java.lang.IllegalArgumentException: Rejecting mapping update to [audit-2025.07.24] as the final mapping would have more than 1 type: [user_op_audit, doc]，如何解决
07-25
<think>我们正在处理Elasticsearch（ES）的一个经典问题：由于索引中存在多个类型（type）而导致的映射更新被拒绝。错误信息明确指出了问题所在：索引`audit-2025.07.24`的最终映射将包含多个类型（`user_op_audit`和`doc`），而ES从6.0版本开始，一个索引只能有一个类型（7.x版本完全移除了多类型支持）。因此，我们需要确保该索引中只有一个类型。 ### 问题原因 - 在ES 6.x中，每个索引只允许有一个映射类型（默认为`_doc`），而在7.x中完全移除了类型的概念（每个索引只有一个隐式的`_doc`类型）。 - 错误信息表明，当前索引中已经存在`user_op_audit`类型，而您又尝试添加`doc`类型（或者反之），导致ES拒绝映射更新。 ### 解决方案 以下是解决此问题的步骤，您可以根据实际情况选择合适的方法： #### 方法1：统一使用单一类型（推荐） **原理**：将索引中的所有文档都使用同一个类型（通常为`_doc`）进行索引。 **操作步骤**： 1. **修改批量索引请求**：确保所有文档操作都使用相同的类型`_doc`。 - 检查您的批量请求（Bulk Request）中的每个操作，确保`_type`字段都设置为`_doc`（或者同一个类型，但建议使用`_doc`）。 - 示例（正确的批量请求格式）： ```json {"index": {"_index": "audit-2025.07.24", "_type": "_doc", "_id": "1"}} {"field1": "value1", "field2": "value2"} // 文档1 {"index": {"_index": "audit-2025.07.24", "_type": "_doc", "_id": "2"}} {"field1": "value3", "field2": "value4"} // 文档2 ``` > 注意：在ES 7.x及以上版本，可以省略`_type`，因为默认就是`_doc`。但是显式指定可以避免歧义。 2. **检查代码**：如果您是通过代码（如Java High Level REST Client、Python Elasticsearch库等）生成请求，请确保在设置文档类型时统一为`_doc`。 - Python示例： ```python from elasticsearch import helpers actions = [ { "_index": "audit-2025.07.24", "_type": "_doc", # 统一类型 "_source": { "user": "alice", "action": "login" } }, # ... 其他文档 ] helpers.bulk(es, actions) ``` #### 方法2：重新创建索引（如果索引已存在多个类型） **适用场景**：如果索引`audit-2025.07.24`已经存在多个类型（比如之前错误地写入了不同类型的数据），则需要重建索引。 **操作步骤**： 1. **创建新索引**（使用正确的单一类型映射）： ```bash # 创建新索引，明确指定映射（使用_doc类型） curl -XPUT "http://localhost:9200/audit-new" -H 'Content-Type: application/json' -d' { "mappings": { "_doc": { // 这里显式定义_doc类型的映射 "properties": { "field1": { "type": "text" }, "field2": { "type": "keyword" } } } } }' ``` 2. **将旧索引数据迁移到新索引**（使用Reindex API）： ```bash curl -XPOST "http://localhost:9200/_reindex" -H 'Content-Type: application/json' -d' { "source": { "index": "audit-2025.07.24" }, "dest": { "index": "audit-new" } }' ``` 3. **删除旧索引并重命名新索引**： ```bash # 删除旧索引 curl -XDELETE "http://localhost:9200/audit-2025.07.24" # 将新索引重命名为旧索引名 curl -XPOST "http://localhost:9200/audit-new/_alias/audit-2025.07.24" # 或者使用索引别名，或者直接重建索引（如果允许停机） ``` #### 方法3：使用不同的索引存储不同类型（推荐用于不同结构的文档） **原理**：如果`user_op_audit`和`doc`代表的是两种完全不同的文档结构（例如审计日志和普通文档），则应该将它们存储在不同的索引中。 **操作步骤**： 1. **创建两个索引**： - `audit-user_op_audit-2025.07.24`：用于存储`user_op_audit`类型的数据。 - `audit-doc-2025.07.24`：用于存储`doc`类型的数据。 2. **修改批量请求**：将不同类型的文档分别发送到对应的索引。 ```json // user_op_audit类型的数据 {"index": {"_index": "audit-user_op_audit-2025.07.24", "_type": "_doc", "_id": "1"}} {"user": "alice", "operation": "delete"} // doc类型的数据 {"index": {"_index": "audit-doc-2025.07.24", "_type": "_doc", "_id": "1"}} {"title": "Document1", "content": "..."} ``` ### 注意事项 1. **版本兼容性**： - 如果您使用的是ES 6.x，请确保在创建索引时指定`include_type_name=true`（但建议升级到7.x以上版本）。 - ES 7.x以上版本完全移除了多类型支持，因此必须使用单一类型（`_doc`）。 2. **数据备份**：在进行索引重建或删除操作前，务必备份数据。 3. **索引别名**：考虑使用索引别名（aliases）来避免在应用程序中硬编码索引名称，便于后续索引管理。 4. **批量请求优化**：确保批量请求中所有文档都使用相同的索引和类型，以提高性能并避免映射冲突。 ### 错误示例分析 参考引用[1]中的错误信息： ```json { "error": { "root_cause": [ { "type": "illegal_argument_exception", "reason": "Rejecting mapping update to [ecommerce] as the final mapping would have more than 1 type: [product, goods]" } ], "type": "illegal_argument_exception", "reason": "Rejecting mapping update to [ecommerce] as the final mapping would have more than 1 type: [product, goods]" }, "status": 400 } ``` 此错误与您的问题完全相同，根本原因是同一个索引（`ecommerce`）中尝试同时存在`product`和`goods`两个类型。解决方法同上：统一类型或拆分索引。 ### 总结 解决“Rejecting mapping update due to multiple types”错误的核心是**确保一个索引中只有一个文档类型**。您可以通过以下方式实现： - 统一使用`_doc`类型（推荐）。 - 重建索引（如果已有多个类型）。 - 拆分索引（适用于不同类型代表不同数据结构的场景）。 请根据您的数据结构和业务需求选择合适的方法。 §§相关问题§§ 1. 如何检查Elasticsearch索引的当前映射状态？ 2. Elasticsearch批量索引操作的最佳实践有哪些？ 3. 在Elasticsearch 7.x+中如何处理遗留的多类型数据迁移？</think>### 解决Elasticsearch映射更新报错：多类型冲突 #### 问题分析 您的Elasticsearch报错信息明确指出了问题核心： ```json { "error": { "type": "illegal_argument_exception", "reason": "Rejecting mapping update to [audit-2025.07.24] as the final mapping would have more than 1 type: [user_op_audit, doc]" }, "status": 400 } ``` 此错误源于Elasticsearch从6.x版本开始实施的**单一类型限制**（Single Type per Index）[^1]。在索引`audit-2025.07.24`中同时检测到两种类型：`user_op_audit`和`doc`，这违反了ES的核心设计原则。 #### 解决方案（逐步操作） ##### 1. **统一文档类型（推荐）** - **修改所有索引操作**，强制使用单一类型`_doc`（ES 7.x+标准类型）： ```json // 批量请求示例 {"index": {"_index": "audit-2025.07.24", "_type": "_doc"}} {"user": "admin", "operation": "delete"} {"index": {"_index": "audit-2025.07.24", "_type": "_doc"}} {"document": "report.pdf", "status": "archived"} ``` - **代码调整示例**（Python）： ```python from elasticsearch import helpers actions = [ {"_op_type": "index", "_index": "audit-2025.07.24", "_type": "_doc", "doc": {...}}, {"_op_type": "index", "_index": "audit-2025.07.24", "_type": "_doc", "doc": {...}} ] helpers.bulk(es, actions) ``` ##### 2. **拆分索引（适用于不同数据结构）** 如果`user_op_audit`和`doc`代表不同实体： - **创建专用索引**： ```bash # 用户操作审计索引 PUT /user_audit-2025.07.24 { "mappings": { "_doc": { "properties": { ... } } } } # 文档索引 PUT /doc_audit-2025.07.24 { "mappings": { "_doc": { "properties": { ... } } } } ``` - **修改数据路由**： ```json {"index": {"_index": "user_audit-2025.07.24", "_type": "_doc"}} {"user": "admin", "operation": "delete"} {"index": {"_index": "doc_audit-2025.07.24", "_type": "_doc"}} {"document": "report.pdf"} ``` ##### 3. **修复现有索引** 如果索引已存在多类型污染： - **步骤1：创建新索引** ```bash PUT /audit_fixed-2025.07.24 { "mappings": { "_doc": { "properties": { /* 统一定义字段 */ } } } } ``` - **步骤2：迁移数据** ```bash POST /_reindex { "source": {"index": "audit-2025.07.24"}, "dest": {"index": "audit_fixed-2025.07.24"} } ``` - **步骤3：切换别名（零停机）** ```bash POST /_aliases { "actions": [ {"remove": {"index": "audit-2025.07.24", "alias": "current_audit"}}, {"add": {"index": "audit_fixed-2025.07.24", "alias": "current_audit"}} ] } ``` #### 关键注意事项 1. **版本兼容性**： - ES 6.x：允许但限制单索引单类型 - ES 7.x+：完全移除类型概念（隐式`_doc`类型） - 检查版本：`GET /` 查看`version.number` 2. **预防措施**： ```bash # 禁止自动创建类型（elasticsearch.yml） action.auto_create_index: false indices.mapping.single_type: true ``` 3. **批量操作优化**： - 批量大小控制在5-15MB - 使用`_bulk` API时确保JSON格式正确 - 启用重试机制处理429错误 > **重要**：生产环境操作前务必备份数据！可通过快照API备份：`PUT /_snapshot/my_backup/snapshot_1` #### 错误处理示例 当捕获到`IllegalArgumentException`时自动重试： ```java // Java示例（ES High Level Client） int retries = 3; while (retries-- > 0) { try { BulkResponse response = client.bulk(request); break; } catch (ElasticsearchException e) { if (e.status() == RestStatus.BAD_REQUEST && e.getMessage().contains("more than 1 type")) { fixMapping(); // 调用修复逻辑 Thread.sleep(1000); } } } ``` 通过以上步骤，您将彻底解决多类型导致的映射更新失败问题。索引结构规范化后，还能获得性能提升（单一类型索引的写入速度比多类型快约40%）[^1]。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值