使用PL/SQL删除百万条记录的大表-阿里云开发者社区

开发者社区> 技术小胖子> 正文

使用PL/SQL删除百万条记录的大表

简介:
+关注继续查看
使用PL/SQL删除百万条记录的大表:
 
最近开发人员对测试环境数据库进行了压力测试,数据库中产生了大量的脏数据。有几张大表里数据量均在百万甚至千万条的记录数。开发人员现提出需求如下:
只清理其中的部分脏数据,不允许对这些表使用truncate操作。于是就有了下面的PL/SQL清理脚本:
 
1.编写删除数据表数据的脚本内容如下:
$ cat data_del.sql 
set serveroutput on
show serveroutput
DECLARE 
V_LOGNUM NUMBER;
V_NEEDARC NUMBER;
BEGIN 
SELECT count(1) INTO V_LOGNUM FROM V$LOG; 
LOOP 
LOOP 
SELECT count(1) INTO V_NEEDARC FROM V$ARCHIVE; 
IF V_NEEDARC < V_LOGNUM - 1 THEN 
 EXIT; 
ELSE 
 DBMS_LOCK.SLEEP(60); 
END IF; 
END LOOP; 
 
DELETE FROM T_USER.T_TABLE_NAME WHERE mobile='13800138000' AND rownum < 100; 
IF SQL%ROWCOUNT = 0 THEN 
 EXIT; 
END IF; 
 COMMIT; 
END LOOP; 
END;
/
 
2.编写调用脚本:
 
$vim clear_dirt_data.sh
source ~/.bash_profile
sqlplus -s mytest/passwd@mydb <<EOF
@data_del.sql;
exit;
EOF
 
 
此脚本程序,通过利用dbms_output.sleep()过程,在删除过程中当需要归档的日志文件达到认定的限制时,使删除过程暂时停止,等待ARCH进程将日志文件归档后再继续进行,从而达到避免归档日志文件来不及归档,导致数据库挂起的问题。 此方法适用于oracle的各个版本。

 

     本文转自vcdog 51CTO博客,原文链接:http://blog.51cto.com/255361/846956,如需转载请自行联系原作者



版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
【转】SQL删除重复记录,只保留其中一条
SQL:删除重复数据,只保留一条用SQL语句,删除掉重复项只保留一条在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢  1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 select * from people where peopleId...
612 0
InnoDB的行记录格式, Compact, Redundant, Compressed, Dynamic
InnoDB存储引擎和大多数数据库一样(如Oracle和Microsoft SQL Server数据库),记录是以行的形式存储的。这意味着页中保存着表中一行行的数据。到MySQL 5.1时,InnoDB存储引擎提供了Compact和Redundant两种格式来存放行记录数据,Redundant是为兼容之前版本而保留的,如果你阅读过InnoDB的源代码,会发现源代码中是用PHYSICAL RECORD(NEW STYLE)和PHYSICAL RECORD(OLD STYLE)来区分两种格式的。
875 0
在64位机器上使用plSQL连接Oracle的问题(SQL*Net not properly installed)
问题背景:         我在64位机器上了64位的oracle客户端。         然后装上PL/SQL Developer,但是连接oracle老报这个错:         Initialization error              SQL*Net not properly installed         OracleHomeKey:           
1366 0
从SQLSERVER/MYSQL数据库中随机取一条或者N条记录
原文:从SQLSERVER/MYSQL数据库中随机取一条或者N条记录 从SQLSERVER/MYSQL数据库中随机取一条或者N条记录 很多人都知道使用rand()函数但是怎麽使用可能不是每个人都知道 建立测试表 USE [sss] GO CREATE TABLE RANDTEST(...
1295 0
MySQL删除小写记录
delete from tablename where binary field1 regexp '[a-z]';
492 0
删除重复记录的SQL语句
删除重复记录的SQL语句 有两个意义上的重复记录,一是完全重复的记录,也即所有字段均重复的记录,二是部分关键字段重复的记录,比如Name字段重复,而其他字段不一定重复或都重复可以忽略。 1、对于第一种重复,比较容易解决,使用 select distinct * from tableName 就可以得到无重复记录的结果集。
1073 0
21119
文章
0
问答
文章排行榜
最热
最新
相关电子书
更多
《2021云上架构与运维峰会演讲合集》
立即下载
《零基础CSS入门教程》
立即下载
《零基础HTML入门教程》
立即下载