mysql ibd文件恢复数据支持ibd批量恢复

大博士.J

已于 2025-03-18 09:00:07 修改

阅读量1.2k

点赞数 15

文章标签： mysql 数据库数据仓库 go

于 2025-03-11 17:34:32 首次发布

本文链接：https://blog.youkuaiyun.com/qq_24396737/article/details/146182892

版权

在数据库管理中，数据丢失是一个非常严重的问题。尽管MySQL提供了多种备份和恢复机制，但在某些情况下，你可能需要直接从物理文件（如.ibd文件）恢复数据。从MySQL 8.0的.ibd文件中提取数据，并将其转换为SQL结构以进行恢复。

在网上找了一堆，都无法实现mysql8.0的ibd文件恢复数据，然后作者自己手搓了一个工具，操作起来没那么繁琐，比较简单。

100%能恢复数据，亲测亲调工具

点击下载工具
密码:j829

工具概述

该工具，能够读取.ibd文件并将其转换为可执行的SQL，从而实现数据恢复。该工具的主要功能包括：

解析.ibd文件：读取并解析.ibd文件中的数据结构。
生成SQL脚本：将解析到的数据转换为SQL插入语句。
恢复数据：通过执行生成的SQL脚本，将数据重新导入数据库。

整体使用流程

1、数据恢复必须有ibd文件
2、通过go程序处理读取ibd文件解析(表结构,丢弃表空间，导入表空间)会输出out.txt
3、拿到输出的文件根据步骤操作
4、先在数据库创建一个原库名
5、通过生成的表结构创建表
6、通过生成的弃表语句执行（执行完，刚创建的表将删除，此时导入要恢复的ibd文件）
7、导入ibd文件后，在服务器上把这些文件权限设置为 mysql用户/mysql组（其他什么777 999不需要）
8、此时执行生成的导入表语句，此刻在打开刷新数据库就恢复数据了

使用步骤

准备.ibd文件
确保你已经从备份或者故障数据库中获取了需要恢复的.ibd文件。
运行恢复工具
使用以下命令运行工具，并指定要恢复的.ibd文件路径：
```
./ibd_recovery_tool --file=/path/to/your/file.ibd
```
这将解析.ibd文件并生成相应的SQL文件。
查看生成的SQL文件
工具会生成一个与原.ibd文件同名但扩展名为.sql的文件。例如，如果输入文件是example.ibd，则输出文件将是example.sql。
恢复数据
使用MySQL客户端或其他数据库管理工具执行生成的SQL文件：
```
mysql -u your_username -p your_database < example.sql
```

看到这个结构基本搞定了

在这里插入图片描述

测试示例开始

1.安装go环境
在这里插入图片描述
2.打开项目

3.打开终端>新建终端

4.复制命令运行

这是我存放的程序路径适当调整      portal这是我的idb父文件夹                             
go run C:\Users\yang\Downloads\mysql文件数据恢复工具GO\go-ibd2schema\cmd\mycmd.go  C:\Users\yang\Desktop\fsdownload\portal

一定要复制执行文件路径
在这里插入图片描述
要恢复的ibd文件

5.命令运行完整

按照步骤执行就可以恢复数据

部分结构示例代码片段

以下是工具的部分关键代码片段，展示了如何解析.ibd文件并生成SQL语句：

package main

import (
    "fmt"
    "os"
    "path/filepath"
    // 其他必要的包...
)

func parseIBDFile(filePath string) error {
    file, err := os.Open(filePath)
    if err != nil {
        return fmt.Errorf("failed to open file: %v", err)
    }
    defer file.Close()

    // 解析.ibd文件的具体逻辑...
    // ...

    return nil
}

func generateSQL(outputPath string, data []byte) error {
    outputFile, err := os.Create(outputPath)
    if err != nil {
        return fmt.Errorf("failed to create output file: %v", err)
    }
    defer outputFile.Close()

    _, err = outputFile.Write(data)
    if err != nil {
        return fmt.Errorf("failed to write data to file: %v", err)
    }

    return nil
}

func main() {
    // 解析命令行参数...
    filePath := "/path/to/your/file.ibd"
    outputPath := filepath.Base(filePath) + ".sql"

    // 解析.ibd文件
    if err := parseIBDFile(filePath); err != nil {
        fmt.Fprintf(os.Stderr, "Error: %v\n", err)
        os.Exit(1)
    }

    // 生成SQL文件
    if err := generateSQL(outputPath, []byte("INSERT INTO table VALUES(...);")); err != nil {
        fmt.Fprintf(os.Stderr, "Error: %v\n", err)
        os.Exit(1)
    }

    fmt.Println("Data recovery completed successfully.")
}