ORALCE 删除含有大数据量的表中的数据

最新推荐文章于 2021-04-13 23:35:42 发布
原创 最新推荐文章于 2021-04-13 23:35:42 发布 · 481 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#delete #oracle #table

本文介绍了一种快速删除Oracle数据库中大量数据的方法。针对传统DELETE命令效率低下的问题，使用TRUNCATE TABLE命令可以实现秒级清空指定数据表，极大地提高了数据库管理效率。

在解决问题的过程中，有一个问题就是删除一个百万计的数据表，直接用delete耗费时间很大，所以用了oracle自带的

truncate table XXX

这个命令，几秒钟的时间就ok了。

原文：

http://www.db2china.net/?782/viewspace-1155.html

Oracle海量数据清理-表空间释放
java界的小学生
08-09 1805
Oracle亿万级别数据清理，表空间释放 背景 风控项目运行三年，相关数据源对接产生的数据不断累积，随着业务量的攀升，表数据量急剧增长，经过几轮delete后，目前数据表三个月存量热数据为4kw+。一方面影响数据查询解析的效率，另一方面由于数据库虚机部署内存占用过大，增长过快不利于稳定运行。 意义 解决海量数据存储带来宕机的风险，解决查询缓慢的问题，保证系统稳定运行。 现状 几张相关大表中均存在clob字段，其中包含，zhengxin、shuiwu、sifa等相关数据报文，单一字段占用表空间较大。正常数据定
数据分析——大量数据进行分析
huanghm88的专栏
10-31 1203
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，将它们加以汇总和理解并消化，以求最大化地开发数据的功能，发挥数据的作用。
oracle大量删除数据之后索引是否需要重建_「干货分享」数据库索引建立使用小技巧...
weixin_39811150的博客
12-03 2044
原创： 达梦 一.建立索引的准则1.1在表中插入数据后创建索引一般情况下，在插入或装载了数据后，为表创建索引会更加有效率。如果在装载数据之前创建了一个或多个索引，那么在插入每行时DM数据库都必须更改和维护每个索引，使得插入效率降低。1.2怎样创建正确的索引(1)如果需要经常地检索大表中的少量的行，就为查询键创建索引；(2)为了改善多个表的连接的性能，可为连接列创建索引；(3)主键和唯一键自动具有索...
oracle平常用的数据块的大小,Oracle数据块详解
weixin_42097819的博客
04-02 2228
1.什么是数据块(Data Block)数据块(Oracle Data Blocks)，本文简称为“块”，是Oracle最小的存储单位，Oracle数据存放在“块”中。一个块占用一定的磁盘空间。特别注意的是，这里的“块”是Oracle的“数据块”，不是操作系统的“块”。Oracle每次请求数据的时候，都是以块为单位。也就是说，Oracle每次请求的数据是块的整数倍。如果Oracle请求的数据量不到...
oracle如何导出表结构及数据,PLSQL怎样导出oracle表结构和数据
weixin_34790081的博客
04-03 9958
1.导出表结构和数据方式1.tools->export user objects是导出表结构tools ->export user object 选择选项，导出.sql文件 说明：导出的是建表语句(包括存储结构)方式2.tools->export tables 是导出表结构还有数据用pl/sql developer导出表的数据时有三种方式：Oracle Export，Sql In...
oracle导出clob表数据及表结构,PL/SQL Developer导入、导出表结构和表数据
weixin_30231327的博客
04-05 2007
在表的所有者不能改变的情况下，可以使用导入导出表结构和表数据的方法，将表移动到你想要的所有者下(注：特别是建立表的时候如果以sysdba的身份登录的话，所有表的所有者都为sys，此时会对你用c#访问数据库产生麻烦，我在我的另一篇文章中也提到《.NET连接Oracle数据库的错误，pl/sql中的myobjects过滤器 》)，此时你只能用这种方法改变所有者。导出表结构:Tools(工具)--&gt...
oracle数据partition,详解Oracle partition分区表
weixin_29116603的博客
04-03 4223
随着表中行数的增多，管理和性能性能影响也将随之增加。备份将要花费更多时间，恢复也将 要花费更说的时间，对整个数据表的查询也将花费更多时间。通过把一个表中的行分为几个部分，可以减少大型表的管理和性能问题，以这种方式划分发表数据的方法称为对表的分区。分区表的优势：(1)改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，提高检索速度；(2)方便数据管理：因为分区表的数据存储在多个部分中，所以按分区...
oracle中多条数据的增查,Oracle数据的增、删、改、查
weixin_36390615的博客
04-12 612
1. 插入数据insert into 表名[(列1,列2,...)] values(值1,值2,...);-- 如果表名后不指定列，则需要为表的所有字段添加值，且顺序为表结构的字段顺序-- 列名不需要加''-- 字符类型的值需要加''，数值类型的值不加''，日期类型需要用函数insert into 表名(date) values(TO_DATE('24/06/2084 9:30','DD/MM/Y...
delete 两个表 oracle,Oracle Delete inner的方式，级联删除子表的数据方式。
weixin_35873811的博客
04-13 2030
例子1：delete from table1 a where exists (select 1 from table2 b where a.id=b.id)例子2：rebatepolicy表是主表，rebatepolicyitems是从表，从表有主表的主键，现在对于主表一些条件的数据的对应子表要求删除。如下方式:delete from rebatepolicyitems rs where exis...
oracle数据库表结构及数据的导出
热门推荐
爱的叹息的专栏
05-09 2万+
参考： 只导出表结构： 1、双击桌面图标，打开PL/SQL Developer，输入用户名密码，登陆oracle数据库； 2、工具（tools）->export user objects是导出表结构 3、在弹出的对话框中设置用户、导出对象、导出路径等参数； 4、单击导出（Export），开始导出； 导出表结构和数据： 1.导出表结构和数据 方式1.tools
oracle 中符号,oracle数据中特殊字符处理
weixin_39965161的博客
04-03 512
最近数据处理时经常发现有数字中含有大量字符，执行过程报“ORA-01722:invalidnumber”异常，整理了一下，可以有以下几种方法去除：1、replace 用法简单，写法较复杂，只能处理已知字符Withtest_table1As(Select1seq_num,'2134?654?agd35'stringsFromdualUnionAllSelect2seq_...
ORA_ROWSCN伪列在Oracle历史数据迁移中的应用研究.pdf
10-09
Oracle数据库系统中，数据迁移是不可避免的，特别是在大型企业中，数据库系统的数据量会随着时间的推移不断增长。为了解决这个问题，Oracle提供了多种数据迁移方法，但是这些方法都存在一定的弊端。因此，本文旨在...
oracle 数据抽取 方案,ETL数据抽取方案简介
weixin_36234970的博客
04-11 990
《ETL数据抽取方案简介》由会员分享，可在线阅读，更多相关《ETL数据抽取方案简介(5页珍藏版)》请在人人文库网上搜索。1、目目录录 ETLETL 简介简介 .4 ETLETL 抽取方案抽取方案.4 1.数据抽取.4 2.数据转换和加工.7 3.数据装载.7 4.时间戳方式 .7 5.全量删除插入方式.8 6.全量比对方式.8 . . ETL 简介 数据集成是把不同来源、格式和特点的数据在逻辑上或...
oracle sql中的“+”加号 以及实现将两个字段的值合并更新至另一字段的sql
06-10 8259
在oracle的sql中，“+”使用“||”代替假设有一张表User：id usernameaddress  emaildes  1.实现将每行记录中的address+email更新至des字段中，sql如下： update user t set t.des = t.address||t.email; 2.实现将每
java web项目与oracle rac 连接
11-29 3424
<br />某环境使用的oralce数据库采用了rac的策略做了负载均衡，现需要将开发的项目部署至该环境，<br />假设，该oracle环境配置了2个IP。<br />【发现】：<br />当使用PL/SQL客户端连接其中一个IP的oracle时，是可以连接的。<br />但部署web项目时，使用传统的spring配置与某一个IP相连时，web项目启动失败，报错：数据库SID无效，<br /> <br />【解决方法】：<br />修改spring的配置文件中关于数据源的配置中的数据库连接地址（url），
oralce 通过sql 获取 某月最后一天函数
07-12 3361
<br />Oracle提供返回某天的当月最后一天函数last_day （）<br /> <br />//返回一个月份的最后一天<br />Select last_day(date'2006-02-01') D from dual；<br />Select last_day(to_date('2006-02-01','YYYY-MM-DD')) from dual;<br /> <br />当然还有很多函数，今天用到这个就记录下来，<br /> <br />好处就是，当做日期比较的时候，比如需要获得test
查询 oracle 表分区 ORA-00924，ORA-00933
08-11 3223
在用PL/SQL查询分区表的时候报错：ORA-00924：missing BY keywordORA-00933:  SQL command not properly ended 语句分别如下：查询主分区：select t.*, t.rowid from person t partition (d2)查询复合分区的子分区：select t.*, t.rowid from p
oracle 实现分组排序
06-17 2746
select t.*, t.rowid,rank() over (partition by t.classid order by t.score,t.classid) from tablename t
oracle CONNECT BY... START WITH... 排序兄弟节点
10-26 2127
使用ORDER SIBLINGS BY 例： SELECT * FROM tabletest t CONNECT BY PRIOR t.id = t.pid START WITH t.id = 0 ORDER SIBLINGS BY t.id
Oracle SQL 中对多个字段进行联合去重并删除多余数据只保留一条
最新发布
04-28
### Oracle SQL 中删除多余数据并保留一条记录（联合去重多个字段） 在 Oracle SQL 中，可以通过 `DELETE` 语句结合子查询的方式实现对多个字段的联合去重，并删除多余的重复数据，只保留一条记录。以下是具体的方法： #### 方法描述 要删除表中多余的重复记录，可以根据一组字段进行分组，并保留每组中某特定条件的一条记录（通常是最小或最大的 `ROWID`）。其余不符合条件的记录则被删除。 以下是一个通用模板用于删除重复记录，仅保留每组中 `ROWID` 最小的那一行： ```sql DELETE FROM table_name p WHERE p.ROWID NOT IN ( SELECT MIN(t.ROWID) FROM table_name t GROUP BY t.column1, t.column2, ..., t.columnN ); ``` 在此模板中： - `table_name` 是目标表名； - `column1`, `column2`, ..., `columnN` 是需要参与联合去重的字段列表； - `MIN(t.ROWID)` 确保每组中只保留具有最小 `ROWID` 的那一行[^2]。 #### 示例代码 假设有如下表 `test`，包含字段 `id`, `test01`, 和 `test02`，现在希望通过这三个字段联合去重，并删除多余的重复记录： ```sql -- 删除重复记录，仅保留每组中 ROWID 最小的一条 DELETE FROM test p WHERE p.ROWID NOT IN ( SELECT MIN(t.ROWID) FROM test t GROUP BY t.id, t.test01, t.test02 ); ``` 这条语句的作用是对 `id`, `test01`, 和 `test02` 进行分组，计算每组中最小的 `ROWID` 并将其保留下来，而其他重复记录将被删除[^2]。 #### 性能优化建议 当处理大规模数据时，上述方法可能会面临性能瓶颈。为了提升效率，可以采取以下措施： 1. **创建索引**：在参与联合去重的字段上建立复合索引，例如针对 `(id, test01, test02)` 创建索引，这有助于加速分组操作[^4]。 ```sql CREATE INDEX idx_test_group ON test(id, test01, test02); ``` 2. **分区删除**：如果数据量过大，可以直接按批次逐步删除部分数据，而不是一次性完成整个表的操作。 3. **使用临时表**：先将去重后的结果存储到一个临时表中，再重新导入原表替换旧数据。 #### 注意事项 - 如果表中含有大量 `NULL` 值，需特别注意它们的行为，因为在大多数数据库系统中，`NULL != NULL` 成立[^5]。 - 执行此类删除操作前应备份原始数据以防误删重要信息。 --- ###
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值