(转)Oracle sql 优化1

   ORACLE有个高速缓冲的概念,这个高速缓冲呢就是存放执行过的SQL语句,那oracle在执行sql语句的时候要做很多工作,例如解析sql语句,估算索引利用率,绑定变量,读取数据块等等这些操作。假设高速缓冲里已经存储了执行过的sql语句,那就直接匹配执行了,少了步骤,自然就快了,但是经过测试会发现高速缓冲只对简单的表起作用,多表的情况小完全没有效果啊,例如在查询单表的时候那叫一个快,但是假设连接多个表,就龟速了。

    最重要一点,ORACLE的高速缓冲是全字符匹配的,什么意思呢,看下面三个select

--No.1
select * from tableA;
--No.2
select * From tableA;
--No.3
select   * from tableA;

这三个语句乍一看是一样的,但是高速缓存是不认的,是全字符匹配的,索引在高速缓存里会存储三条不同的语句,说道这里,又引出一个习惯,就是要保持良好的编程习惯,这个很重要啊。

 ORACLE的多表优化我积累了一些,都是常用的,介绍下

第一点呢是From 子句后面的 表顺序有讲究

   先说为啥,ORACLE在解析sql语句的时候对From子句后面的表名是从右往左解析的,是先扫描最右边的表,然后在扫描左边的表,然后用左边的表匹配数据,匹配成功后就合并。

   所以,在对多表查询中,一定要把小表写在最右边,为什么自己想想就明白了。例如下面的两个语句:

--No.1  tableA 100w条记录  tableB 1w条记录 执行速度 十秒级
select count(*) from tableA,tableB;
  
--No.2  执行速度百秒级甚至更高
select count(*) from tableB,tableA;  

这个估计很多人都知道,但是要确认非常有用。

还有一种是三张表的查询,例如

select count(1) from tableA a,tableB b ,tableC c where a.id=b.id and a.id=c.id;

上面种 tableA 就称为交叉表,根据oracle对From子句从右向左的扫描方式,应该把交叉表放在最末尾,然后才是最小表,所以上面的应该这样写

--tableA a 交叉表 
--tabelB b 100w
--tableC c 1w
select count(1) from tableB b ,tableC c ,tableA a where a.id=b.id and a.id=c.id;

这种写法对大数据量会非常有用,大家谨记,也是很常用的。

第二点呢是Where子句后面的条件过滤有讲究,ORACLE对where子句后面的条件过滤是自下向上,从右向左扫描的,所以和From子句一样一样的,把过滤条件排个序,按过滤数据的大小,自然就是最少数据的那个条件写在最下面,最右边,依次类推,例如

--No.1 不可取 性能低下
select * from tableA a where 
a.id>500
and a.lx = '2b'
and a.id < 'select count(1) from tableA  where id=a.id '

--No.2 性能高
select * from tableA a where 
a.id < 'select count(1) from tableA  where id=a.id '
and a.id>500
and a.lx = '2b'

第三点呢估计搞数据库的都知道啦,就是在select的时候少用*,多敲敲键盘,写上字段名吧,因为ORACLE的查询器会把*转换为表的全部列名,这个会浪费时间的,所以在大表中少用。

第四点呢就是要使用rowid 这个很好啊,可以用来分页,删除查询重复记录,很强大的,给两个例子,rownum是用在分页:

下面总结一下几种查找和删除重复记录的方法(以表CZ为例):

CZ的结构如下:

SQL> desc cz

            Name Null? Type

            ----------------------------------------- 

             C1 NUMBER(10)

            C10 NUMBER(5)

            C20 VARCHAR2(3)

删除重复记录的方法原理:

(1).Oracle中,每一条记录都有一个rowidrowid在整个数据库中是唯一的,rowid确定了每条记录是在Oracle中的哪一个数据文件、块、行上。

(2).在重复的记录中,可能所有列的内容都相同,但rowid不会相同,所以只要确定出重复记录中那些具有最大rowid的就可以了,其余全部删除。

重复记录判断的标准是:

C1,C10C20这三列的值都相同才算是重复记录。

经查看表CZ总共有16条记录:

SQL>set pagesize 100

SQL>select * from cz;

    C1 C10 C20

 ---------- ---------- ---

     1 2 dsf

     1 2 dsf

     1 2 dsf

     1 2 dsf

     2 3 che

     1 2 dsf

     1 2 dsf

     1 2 dsf

     1 2 dsf

     2 3 che

     2 3 che

     2 3 che

     2 3 che

     3 4 dff

     3 4 dff

     3 4 dff

     4 5 err

     5 3 dar

     6 1 wee

    7 2 zxc

 20 rows selected.

1.查找重复记录的几种方法:

(1).SQL>select * from cz group by c1,c10,c20 having count(*) >1;

          C1 C10 C20

    ---------- ---------- ---

      1 2 dsf

      2 3 che

      3 4 dff

(2).SQL>select distinct * from cz;

            C1 C10 C20

 ---------- ---------- ---

          1 2 dsf

          2 3 che

          3 4 dff

(3).SQL>select * from cz a where rowid=(select max(rowid) from cz where c1=a.c1 and c10=a.c10 and c20=a.c20);
C1 C10 C20
---------- ---------- ---
1 2 dsf
2 3 che
3 4 dff

2.删除重复记录的几种方法:

(1).适用于有大量重复记录的情况(C1,C10C20列上建有索引的时候,用以下语句效率会很高)

SQL>delete cz where (c1,c10,c20) in (select c1,c10, c20 from cz group by c1,c10,c20 having count(*)>1) and rowid not in (select min(rowid) from cz group by c1,c10,c20 having count(*)>1);
SQL>delete cz where rowid not in (select min(rowid) from cz group by c1,c10,c20);

(2).适用于有少量重复记录的情况(注意,对于有大量重复记录的情况,用以下语句效率会很低)

SQL>delete from cz a where a.rowid!=(select max(rowid) from cz b where a.c1=b.c1 and a.c10=b.c10 and a.c20=b.c20);

SQL>delete from cz a where a.rowid<(select max(rowid)    from cz b where a.c1=b.c1 and a.c10=b.c10 and a.c20=b.c20);
SQL>delete from cz a where rowid <(select max(rowid) from cz where c1=a.c1 and c10=a.c10 and c20=a.c20);

(3).适用于有少量重复记录的情况(临时表法)

SQL>create table test as select distinct * from cz;    (建一个临时表test用来存放重复的记录)
SQL>truncate table cz; (清空cz表的数据,但保留cz表的结构)
SQL>insert into cz select * from test;       (再将临时表test里的内容反插回来)

(4).适用于有大量重复记录的情况(Exception into 子句法)

采用alter table 命令中的 Exception into 子句也可以确定出库表中重复的记录。这种方法稍微麻烦一些,为了使用“excepeion into ”子句,必须首先创建 EXCEPTIONS 表。创建该表的 SQL 脚本文件为 utlexcpt.sql 。对于win2000系统和 UNIX 系统, Oracle 存放该文件的位置稍有不同,在win2000系统下,该脚本文件存放在$ORACLE_HOMEOra90rdbmsadmin 目录下;而对于 UNIX 系统,该脚本文件存放在$ORACLE_HOME/rdbms/admin 目录下

体步骤如下:

SQL>@?/rdbms/admin/utlexcpt.sql

            Table created.

            SQL>desc exceptions

            Name Null? Type

            ----------------------------------------- 

            ROW_ID ROWID

            OWNER VARCHAR2(30)

            TABLE_NAME VARCHAR2(30)

            CONSTRAINT VARCHAR2(30)

            SQL>alter table cz add constraint cz_unique unique(c1,c10,c20) exceptions into exceptions; 

            ERROR at line 1:

           ORA-02299: cannot validate (TEST.CZ_UNIQUE) - duplicate keys found

            SQL>create table dups as select * from cz where rowid in (select row_id from exceptions); 

            Table created.

            SQL>select * from dups; 

            C1 C10 C20

           ---------- ---------- ---

            1 2 dsf

            1 2 dsf

           1 2 dsf

            1 2 dsf

            2 3 che

           1 2 dsf

            1 2 dsf

           1 2 dsf

            1 2 dsf

            2 3 che

            2 3 che

            2 3 che

            2 3 che

            3 4 dff

           3 4 dff

           3 4 dff

            16 rows selected.

            SQL>select row_id from exceptions;

            ROW_ID

           ------------------

           AAAHD/AAIAAAADSAAA

           AAAHD/AAIAAAADSAAB

            AAAHD/AAIAAAADSAAC

            AAAHD/AAIAAAADSAAF

            AAAHD/AAIAAAADSAAH

           AAAHD/AAIAAAADSAAI

            AAAHD/AAIAAAADSAAG

            AAAHD/AAIAAAADSAAD

            AAAHD/AAIAAAADSAAE

            AAAHD/AAIAAAADSAAJ

            AAAHD/AAIAAAADSAAK

            AAAHD/AAIAAAADSAAL

           AAAHD/AAIAAAADSAAM

            AAAHD/AAIAAAADSAAN

            AAAHD/AAIAAAADSAAO

            AAAHD/AAIAAAADSAAP

           16 rows selected.

            SQL>delete from cz where rowid in ( select row_id from exceptions);

            16 rows deleted.

            SQL>insert into cz select distinct * from dups;

           3 rows created.

            SQL>select *from cz;

            C1 C10 C20

            ---------- ---------- ---

1 2 dsf

2 3 che

3 4 dff

4 5 err

5 3 dar

6 1 wee

7 2 zxc

7 rows selected.

从结果里可以看到重复记录已经删除。

Oracle查询删除表中重复记录

最高效删除重复记录的方法,使用为例rowid

DELETE FROM EMP E WHERE E.ROWID > (SELECT MIN(X.ROWID) FROM EMP X WHERE X.EMP_NO = E.EMP_NO);

     1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断
  select * from people where peopleId in (select   peopleId from   people group by   peopleId having count(peopleId) > 1)
  2、删除表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,只留有 rowid最小的记录
  delete from people where peopleId in (select   peopleId from people group by   peopleId   having count(peopleId) > 1) and rowid not in (select min(rowid) from   people group by peopleId having count(peopleId )>1)
  注:rowidoracle自带不用该.....
  3、查找表中多余的重复记录(多个字段)
  select * from vitae a where (a.peopleId,a.seq) in   (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)
  4、删除表中多余的重复记录(多个字段),只留有rowid最小的记录
  delete from vitae a where (a.peopleId,a.seq) in   (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1) and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)
  5、查找表中多余的重复记录(多个字段),不包含rowid最小的记录
  select * from vitae a where (a.peopleId,a.seq) in   (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1) and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)
  ()比方说 在A表中存在一个字段“name”,而且不同记录之间的“name”值有可能会相同,现在就是需要查询出在该表中的各记录之间,“name”值存在重复的项;
  Select Name,Count(*) From A Group By Name Having Count(*) > 1
  如果还查性别也相同大则如下:
  Select Name,sex,Count(*) From A Group By Name,sex Having Count(*) > 1

--分页 start=10 limit=10 --end 为 start + limit select * from ( select A.*,Rownum rn from (select * from tableA order by id) A where rownum <= 20 ) b wehre rn> 10 order by id desc /*解释一下, 1.查询要排列的表 A 2.查询A表的Rownum 找出小于end的数据 组成表B 3.查询B表通过rownum找出大于start的数据 完成 简单的说先根据end值过滤数据,然后在根据start过滤数据 so 简单的 */

第五点是存储过程中需要注意的,多用commit了,既可以释放资源,但是要谨慎啊。

第六点是减少对数据库表的查询,这个很重要,能减少就减少,因为在执行语句的时候oracle会做很多初始工作。

第七点不要用in啦,用exists来代替咯,例如:

--NO.1  IN的写法  
SELECT * FROM TABLEA A WHERE 
A.ID IN 
( SELECT ID FORM TABLEB B WHERE B.ID>1)

--NO.2 exists 写法
SELECT * FROM TABLEA A WHERE
EXISTS (
SELECT 1 FROM TABLEB B WHERE A.ID=B.ID AND B.ID>1)

相同的还有使用not exists 代替 not in ,方法雷同啊,就不介绍了。

那还有一些简单的方法,例如索引这些就比较简单了,就不介绍了,就写在这里吧。

猜你喜欢

转载自sangei.iteye.com/blog/1484819