34、数据库数据加载、备份与恢复的全面指南

数据库数据加载、备份与恢复的全面指南

1. 数据加载相关问题与实践

1.1 案例场景：解决事务日志膨胀问题

一家公司每周将多个平面文件中的数据加载到其日志表中。IT 团队在每周维护窗口期间进行加载和备份，但在加载约 70% 的文件后，数据库日志文件几乎已满，不得不提前完成日志备份，这让数据库管理员感到困惑，因为他们在加载开始前已将数据库的恢复模式设置为大容量日志记录。

日志表包含五周的日志，在加载最新一周的数据之前，会删除最旧一周的日志。公司正在制定分区策略，但目前需要帮助。该公司使用 BULK INSERT 命令加载数据，日志表的主键（一个标识列）上有一个聚集索引和四个非聚集索引。

经过审查加载脚本，发现 BULK INSERT 命令未使用任何提示，且脚本除了删除和批量插入数据外，未对表进行其他操作。此外，每周加载的起始和结束标识值存储在另一个表中。为了在数据加载期间尽量减少日志记录，可以考虑以下操作：
- 确保 BULK INSERT 命令使用适当的提示，以优化加载过程。
- 检查并调整索引，可能在加载数据前禁用非聚集索引，加载完成后再重新启用。

1.2 数据加载实践

1.2.1 使用 bcp 和 BULK INSERT 加载表

• 实践 1 ：创建一个数据文件，使用 bcp 并设置不同参数来加载该文件，记录加载行为的差异。
• 实践 2 ：使用与实践 1 相同的数据文件，使用 BULK INSERT 并设置不同选项来加载文件，记录加载行为的差异。