Oracle百亿数据清理方案-数据泵dmp

置顶

解决问题no解决代码问题

已于 2023-11-27 10:02:42 修改

阅读量2.6k

点赞数

CC 4.0 BY-SA版权

分类专栏： # oracle 文章标签： oracle partition expdp impdp index tablespace

于 2020-04-24 09:46:25 首次发布

本文链接：https://blog.youkuaiyun.com/qq_39308071/article/details/105723944

本文介绍了Oracle中处理大数据量清理的策略，包括为何避免使用`delete`操作，选择`rename`表配合重建索引的方式，以及按月自动分区的方法。详细讲解了按时间戳、日期和字符字段进行分区的实现，并提供了脚本示例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

（一）为什么大数据量不能用delete删除

（二）选择使用rename重建表方式

1，综上所述选择rename方式把，历史数据进行备份；

2，删除索引（会与原历史表的重复）；

3，重新创建历史表，并按月添加分区；

3.1，oracle按时间戳（TIMESTAMP）类型按月自动分区

3.2，oracle按时间DATE类型按月自动分区

3.3，oracle按字符VARCHAR2类型字段按月自动分区

3.4 查看分区数据

（三）sh脚本

三，删除历史表

（一）先truncate 后drop删除历史表

（二）分步分阶段大表删除

（三）观察表空间大小

一，Oracle数据泵导入导出dmp

（一）设置目录和操作权限

1.登录root权限，然后切换到Oracle用户下；
su - oracle;

2.登录dba权限数据库；
sqlplus sys/123456 as sysdba;

2.1 检查目录是否存在
#select * from dba_directories where DIRECTORY_NAME='EXPDP_PATH'；


3.连接成功后。创建目录、后面引号部分是你的dmp文件所在的路径。必须放到Oracle文件下面。路径不要有中文；
#应programmer_ada同学提议修改
#expdp目录需额外创建，根据自身业务调整
create directory EXPDP_PATH as '/home/oracle/expdp';

4.授权成功后。把读写IMPDMP目录权限赋予给cim 数据库用户；
grant read,write on directory IMPDMP to cim;

5.退出数据库
exit;

6.如果提示没有directory权限
grant create any directory to oracle;
grant drop any dirctory to oracle;


7.如果该目录不使用，建议删除
drop directory EXPDP_PATH; 

或者覆盖 create or replace

针对2.1 ，3步骤的优化

2.1 检查目录是否存在
#select * from dba_directories where DIRECTORY_NAME='IMPDMP'；

3.对导出的.dmp做目录目录上的调整，不建议直接使用：标准目录
#应programmer_ada同学提议修改
#expdp目录需额外创建，根据自身业务调整
create directory EXPDP_PATH as '/home/oracle/expdp';


如果该目录不使用，建议删除
drop directory EXPDP_PATH;

（二）导入

username 用户名，password 密码 database 数据库名称

#导入整个用户的表
impdp username/password@database directory=IMPDMP  dumpfile=dumpName.dmp;

（三）导出

同样需要文件授权 ; username 用户名，password 密码 database 数据库名称

expdp username/password@databasedumpfile=22.dmp logfile=tables.log  directory=IMPDMP;

#按表，有条件导出
expdp username/password@database directory=IMPDMP  dumpfile=22.dmp logfile=22.log table=tableName query=\"t where t.id=1\";