oracle笔记 (2).doc

一Oracle数据库中分区表的操作方法摘要：在大量业务数据处理的项目中，可以考虑使用分区表来提高应用系统的性能并方便数据管理，本文详细介绍了分区表的使用。 在大型的企业应用或企业级的数据库应用中，要处理的数据量通常可以达到几十到几百GB，有的甚至可以到TB级。虽然存储介质和数据处理技术的发展也很快，但是仍然不能满足用户的需求，为了使用户的大量的数据在读写操作和查询中速度更快，Oracle提供了对表和索引进行分区的技术，以改善大型应用系统的性能。 使用分区的优点： 增强可用性：如果表的某个分区出现故障，表在其他分区的数据仍然可用； 维护方便：如果表的某个分区出现故障，需要修复数据，只修复该分区即可； 均衡I/O：可以把不同的分区映射到磁盘以平衡I/O，改善整个系统性能； 改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，提高检索速度。 Oracle数据库提供对表或索引的分区方法有三种： 范围分区 Hash分区（散列分区） 复合分区 下面将以实例的方式分别对这三种分区方法来说明分区表的使用。为了测试方便，我们先建三个表空间。 create tablespace dinya_space01 datafile /test/demo/oracle/demodata/dinya01.dnf size 50M create tablespace dinya_space01 datafile /test/demo/oracle/demodata/dinya02.dnf size 50M create tablespace dinya_space01 datafile /test/demo/oracle/demodata/dinya03.dnf size 50M 1.1. 分区表的创建 1.1.1. 范围分区 范围分区就是对数据表中的某个值的范围进行分区，根据某个值的范围，决定将该数据存储在哪个分区上。如根据序号分区，根据业务记录的创建日期进行分区等。 需求描述：有一个物料交易表，表名：material_transactions。该表将来可能有千万级的数据记录数。要求在建该表的时候使用分区表。这时候我们可以使用序号分区三个区，每个区中预计存储三千万的数据，也可以使用日期分区，如每五年的数据存储在一个分区上。 根据交易记录的序号分区建表： SQL create table dinya_test 2 ( 3 transaction_id number primary key, 4 item_id number(8) not null, 5 item_description varchar2(300), 6 transaction_date date not null 7 ) 8 partition by range (transaction_id) 9 ( 10 partition part_01 values less than(30000000) tablespace dinya_space01, 11 partition part_02 values less than(60000000) tablespace dinya_space02, 12 partition part_03 values less than(maxvalue) tablespace dinya_space03 13 ); Table created.建表成功，根据交易的序号，交易ID在三千万以下的记录将存储在第一个表空间dinya_space01中，分区名为:par_01，在三千万到六千万之间的记录存储在第二个表空间：dinya_space02中，分区名为：par_02，而交易ID在六千万以上的记录存储在第三个表空间dinya_space03中，分区名为par_03. 根据交易日期分区建表： SQL create table dinya_test 2 ( 3 transaction_id number primary key, 4 item_id number(8) not null, 5 item_description varchar2(300), 6 transaction_date date not null 7 ) 8 partition by range (transaction_date) 9 ( 10 partition part_01 values less than(to_date(2006-01-01,yyyy-mm-dd) tablespace dinya_space01, 11 partition part_02 values less than(to_date(2010-01-01,yyyy-mm-dd) tablespace dinya_space02, 12 partition part_03 values less than(maxvalue) tablespace dinya_space03 13 ); Table created. 这样我们就分别建了以交易序号和交易日期来分区的分区表。每次插入数据的时候，系统将根据指定的字段的值来自动将记录存储到制定的分区（表空间）中。 当然，我们还可以根据需求，使用两个字段的范围分布来分区，如partition by range ( transaction_id ,transaction_date), 分区条件中的值也做相应的改变，请读者自行测试。 1.1.2. Hash分区（散列分区） 散列分区为通过指定分区编号来均匀分布数据的一种分区类型，因为通过在I/O设备上进行散列分区，使得这些分区大小一致。如将物料交易表的数据根据交易ID散列地存放在指定的三个表空间中： SQL create table dinya_test 2 ( 3 transaction_id number primary key, 4 item_id number(8) not null, 5 item_description varchar2(300), 6 transaction_date date 7 ) 8 partition by hash(transaction_id) 9 ( 10 partition part_01 tablespace dinya_space01, 11 partition part_02 tablespace dinya_space02, 12 partition part_03 tablespace dinya_space03 13 ); Table created. 建表成功，此时插入数据，系统将按transaction_id将记录散列地插入三个分区中，这里也就是三个不同的表空间中。 1.1.3. 复合分区 有时候我们需要根据范围分区后，每个分区内的数据再散列地分布在几个表空间中，这样我们就要使用复合分区。复合分区是先使用范围分区，然后在每个分区内再使用散列分区的一种分区方法，如将物料交易的记录按时间分区，然后每个分区中的数据分三个子分区，将数据散列地存储在三个指定的表空间中： SQL create table dinya_test 2 ( 3 transaction_id number primary key, 4 item_id number(8) not null, 5 item_description varchar2(300), 6 transaction_date date 7 ) 8 partition by range(transaction_date)subpartition by hash(transaction_id) 9 subpartitions 3 store in (dinya_space01,dinya_space02,dinya_space03) 10 ( 11 partition part_01 values less than(to_date(2006-01-01,yyyy-mm-dd), 12 partition part_02 values less than(to_date(2010-01-01,yyyy-mm-dd), 13 partition part_03 values less than(maxvalue) 14 ); Table created. 该例中，先是根据交易日期进行范围分区，然后根据交易的ID将记录散列地存储在三个表空间中。1.2. 分区表操作 以上了解了三种分区表的建表方法，下面将使用实际的数据并针对按日期的范围分区来测试分区表的数据记录的操作。 1.2.1. 插入记录： SQL insert into dinya_test values(1,12,BOOKS,sysdate); 1 row created. SQL insert into dinya_test values(2,12, BOOKS,sysdate+30); 1 row created. SQL insert into dinya_test values(3,12, BOOKS,to_date(2006-05-30,yyyy-mm-dd); 1 row created. SQL insert into dinya_test values(4,12, BOOKS,to_date(2007-06-23,yyyy-mm-dd); 1 row created. SQL insert into dinya_test values(5,12, BOOKS,to_date(2011-02-26,yyyy-mm-dd); 1 row created. SQL insert into dinya_test values(6,12, BOOKS,to_date(2011-04-30,yyyy-mm-dd); 1 row created. SQL commit; Commit complete. SQL 按上面的建表结果，2006年前的数据将存储在第一个分区part_01上，而2006年到2010年的交易数据将存储在第二个分区part_02上，2010年以后的记录存储在第三个分区part_03上。 1.2.2. 查询分区表记录： SQL select * from dinya_test partition(part_01); TRANSACTION_ID ITEM_ID ITEM_DESCRIPTION TRANSACTION_DATE - 1 12 BOOKS 2005-1-14 14:19: 2 12 BOOKS 2005-2-13 14:19: SQL SQL select * from dinya_test partition(part_02); TRANSACTION_ID ITEM_ID ITEM_DESCRIPTION TRANSACTION_DATE - 3 12 BOOKS 2006-5-30 4 12 BOOKS 2007-6-23 SQL SQL select * from dinya_test partition(part_03); TRANSACTION_ID ITEM_ID ITEM_DESCRIPTION TRANSACTION_DATE - 5 12 BOOKS 2011-2-26 6 12 BOOKS 2011-4-30 SQL 从查询的结果可以看出，插入的数据已经根据交易时间范围存储在不同的分区中。这里是指定了分区的查询，当然也可以不指定分区，直接执行select * from dinya_test查询全部记录。在也检索的数据量很大的时候，指定分区会大大提高检索速度。 1.2.3. 更新分区表的记录： SQL update dinya_test partition(part_01) t set t.item_description=DESK where t.transaction_id=1; 1 row updated. SQL commit; Commit complete. SQL 这里将第一个分区中的交易ID=1的记录中的item_description字段更新为“DESK”，可以看到已经成功更新了一条记录。但是当更新的时候指定了分区，而根据查询的记录不在该分区中时，将不会更新数据，请看下面的例子： SQL update dinya_test partition(part_01) t set t.item_description=DESK where t.transaction_id=6; 0 rows updated. SQL commit; Commit complete. SQL 指定了在第一个分区中更新记录，但是条件中限制交易ID为6，而查询全表，交易ID为6的记录在第三个分区中，这样该条语句将不会更新记录。 1.2.4. 删除分区表记录： SQL delete from dinya_test partition(part_02) t where t.transaction_id=4; 1 row deleted. SQL commit; Commit complete. SQL 上面例子删除了第二个分区part_02中的交易记录ID为4的一条记录，和更新数据相同，如果指定了分区，而条件中的数据又不在该分区中时，将不会删除任何数据。 1.3. 分区表索引的使用： 分区表和一般表一样可以建立索引，分区表可以创建局部索引和全局索引。当分区中出现许多事务并且要保证所有分区中的数据记录的唯一性时采用全局索引。 1.3.1. 局部索引分区的建立： SQL create index dinya_idx_t on dinya_test(item_id) 2 local 3 ( 4 partition idx_1 tablespace dinya_space01, 5 partition idx_2 tablespace dinya_space02, 6 partition idx_3 tablespace dinya_space03 7 ); Index created. SQL 看查询的执行计划，从下面的执行计划可以看出，系统已经使用了索引： SQL select * from dinya_test partition(part_01) t where t.item_id=12; Execution Plan - 0 SELECT STATEMENT Optimizer=CHOOSE (Cost=2 Card=1 Bytes=187) 1 0 TABLE Access (BY LOCAL INDEX ROWID) OF DINYA_TEST (Cost= 2 Card=1 Bytes=187) 2 1 INDEX (RANGE SCAN) OF DINYA_IDX_T (NON-UNIQUE) (Cost=1 Card=1) Statistics - 0 recursive calls 0 db block gets 4 consistent gets 0 physical reads 0 redo size 334 bytes sent via SQL*Net to client 309 bytes received via SQL*Net from client 2 SQL*Net roundtrips to/from client 1 sorts (memory) 0 sorts (disk) 2 rows processed SQL 1.3.2. 全局索引分区的建立全局索引建立时global 子句允许指定索引的范围值，这个范围值为索引字段的范围值： SQL create index dinya_idx_t on dinya_test(item_id) 2 global partition by range(item_id) 3 ( 4 partition idx_1 values less than (1000) tablespace dinya_space01, 5 partition idx_2 values less than (10000) tablespace dinya_space02, 6 partition idx_3 values less than (maxvalue) tablespace dinya_space03 7 ); Index created. SQL本例中对表的item_id字段建立索引分区，当然也可以不指定索引分区名直接对整个表建立索引，如： SQL create index dinya_idx_t on dinya_test(item_id); Index created. SQL 同样的，对全局索引根据执行计划可以看出索引已经可以使用： SQL select * from dinya_test t where t.item_id=12; Execution Plan - 0 SELECT STATEMENT Optimizer=CHOOSE (Cost=2 Card=3 Bytes=561) 1 0 TABLE ACCESS (BY GLOBAL INDEX ROWID) OF DINYA_TEST (Cost =2 Card=3 Bytes=561) 2 1 INDEX (RANGE SCAN) OF DINYA_IDX_T (NON-UNIQUE) (Cost=1 Card=3) Statistics - 5 recursive calls 0 db block gets 10 consistent gets 0 physical reads 0 redo size 420 bytes sent via SQL*Net to client 309 bytes received via SQL*Net from client 2 SQL*Net roundtrips to/from client 3 sorts (memory) 0 sorts (disk) 5 rows processed SQL 1.4. 分区表的维护： 了解了分区表的建立、索引的建立、表和索引的使用后，在应用的还要经常对分区进行维护和管理。日常维护和管理的内容包括：增加一个分区，合并一个分区及删除分区等等。下面以范围分区为例说明增加、合并、删除分区的一般操作： 1.4.1. 增加一个分区: SQL alter table dinya_test 2 add partition part_04 values less than(to_date(2012-01-01,yyyy-mm-dd) tablespace dinya_spa ce03; Table altered. SQL 增加一个分区的时候，增加的分区的条件必须大于现有分区的最大值，否则系统将提示ORA-14074 partition bound must collate higher than that of the last partition 错误。 1.4.2. 合并一个分区： SQL alter table dinya_test merge partitions part_01,part_02 into partition part_02; Table altered. SQL 在本例中将原有的表的part_01分区和part_02分区进行了合并，合并后的分区为part_02,如果在合并的时候把合并后的分区定为part_01的时候，系统将提示ORA-14275 cannot reuse lower-bound partition as resulting partition 错误。 1.4.3. 删除分区： SQL alter table dinya_test drop partition part_01; Table altered. SQL删除分区表的一个分区后，查询该表的数据时显示，该分区中的数据已全部丢失，所以执行删除分区动作时要慎重，确保先备份数据后再执行，或将分区合并。 1.5. 总结： 需要说明的是，本文在举例说名分区表事务操作的时候，都指定了分区，因为指定了分区，系统在执行的时候则只操作该分区的记录，提高了数据处理的速度。不要指定分区直接操作数据也是可以的。在分区表上建索引及多索引的使用和非分区表一样。此外，因为在维护分区的时候可能对分区的索引会产生一定的影响，可能需要在维护之后重建索引，相关内容请参考分区表索引部分的文档。二Oracle经验技巧集锦1删除表空间DROP TABLESPACE TableSpaceName INCLUDING CONTENTS AND DATAFILES2删除用户DROP USER User_Name CASCADE3删除表的注意事项在删除一个表中的全部数据时，须使用TRUNCATE TABLE 表名;因为用DROP TABLE，DELETE * FROM 表名时，TABLESPACE表空间该表的占用空间并未释放，反复几次DROP，DELETE操作后，该TABLESPACE上百兆的空间就被耗光了。4having子句的用法having子句对group by子句所确定的行组进行控制，having子句条件中只允许涉及常量,聚组函数或group by 子句中的列。5外部联接+的用法外部联接+按其在=的左边或右边分左联接和右联接.若不带+运算符的表中的一个行不直接匹配于带+预算符的表中的任何行,则前者的行与后者中的一个空行相匹配并被返回.若二者均不带+,则二者中无法匹配的均被返回.利用外部联接+,可以替代效率十分低下的 not in 运算,大大提高运行速度.例如,下面这条命令执行起来很慢 用外联接提高表连接的查询速度 在作表连接(常用于视图)时，常使用以下方法来查询数据: SELECT PAY_NO, PROJECT_NAME FROM A WHERE A.PAY_NO NOT IN (SELECT PAY_ NO FROM B WHERE VALUE =120000); - 但是若表A有10000条记录，表B有10000条记录，则要用掉30分钟才能查完，主要因为NOT IN要进 行一条一条的比较，共需要10000*10000次比较后，才能得到结果。该用外联接后，可以缩短到1分左右的时间: SELECT PAY_NO,PROJECT_NAMEFROM A,B WHERE A.PAY_NO=B.PAY_NO(+) AND B.PAY_NO IS NULL AND B.VALUE =12000; 6set transaction命令的用法 在执行大事务时,有时Oracle会报出如下的错误: ORA-01555:snapshot too old (rollback segment too small) 这说明oracle给此事务随机分配的回滚段太小了,这时可以为它指定一个足够大的回滚段,以确保这个事务的成功执行.例如 set transaction use rollback segment roll_abc; delete from table_name where . commit; 回滚段roll_abc被指定给这个delete事务,commit命令则在事务结束之后取消了回滚段的指定. 7数据库重建应注意的问题 在利用import进行数据库重建过程中,有些视图可能会带来问题,因为结构输入的顺序可能造成视图的输入先于它低层次表的输入,这样建立视图就会失败.要解决这一问题,可采取分两步走的方法:首先输入结构,然后输入数据.命令举例如下 (uesrname:jfcl,password:hfjf,host sting:ora1,数据文件:expdata.dmp): imp jfcl/hfjfora1 file=empdata.dmp rows=N imp jfcl/hfjfora1 file=empdata.dmp full=Y buffer=64000 commit=Y ignore=Y 第一条命令输入所有数据库结构,但无记录.第二次输入结构和数据,64000字节提交一次.ignore=Y选项保证第二次输入既使对象存在的情况下也能成功. select a.empno from emp a where a.empno not in (select empno from emp1 where job=SALE); 倘若利用外部联接,改写命令如下: select a.empno from emp a ,emp1 b where a.empno=b.empno(+) and b.empno is null and b.job=SALE; 可以发现,运行速度明显提高. 8从已知表新建另一个表：CREATE TABLE b AS SELECT * (可以是表a中的几列) FROM a WHERE a.column = .; 9查找、删除重复记录: 法一: 用Group by语句 此查找很快的select count(num), max(name) from student -查找表中num列重复的，列出重复的记录数，并列出他的name属性group by num having count(num) 1 -按num分组后找出表中num列重复，即出现次数大于一次delete from student(上面Select的) 这样的话就把所有重复的都删除了。-慎重 法二:当表比较大(例如10万条以上)时,这个方法的效率之差令人无法忍受,需要另想办法: - 执行下面SQL语句后就可以显示所有DRAWING和DSNO相同且重复的记录 SELECT * FROM EM5_PIPE_PREFAB WHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB D -D相当于First,Second WHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING AND EM5_PIPE_PREFAB.DSNO=D.DSNO); - 执行下面SQL语句后就可以刪除所有DRAWING和DSNO相同且重复的记录 DELETE FROM EM5_PIPE_PREFAB WHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB D WHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING AND EM5_PIPE_PREFAB.DSNO=D.DSNO); 10返回表中N，M条记录： 取得某列中第N大的行 select column_name from (select table_name.*,dense_rank() over (order by column desc) rank from table_name) where rank = &N； 假如要返回前5条记录： select * from tablename where rownum6;(或是rownum = 5 或是rownum != 6) 假如要返回第5-9条记录： select * from tablename where and rownum10 minus select * from tablename where and rownum5 order by name 选出结果后用name排序显示结果。(先选再排序) 注意：只能用以上符号(、,=,=,Between.and。由于rownum是一个总是从1开始的伪列，Oracle 认为这种条件 不成立，查不到记录. 另外，这个方法更快： select * from ( select rownum r,a from yourtable where rownum 10 这样取出第11-20条记录!(先选再排序再选) 要先排序再选则须用select嵌套：内层排序外层选。 rownum是随着结果集生成的，一旦生成，就不会变化了；同时,生成的结果是依次递加的，没有1就永远不会有2! rownum 是在 查询集合产生的过程中产生的伪列，并且如果where条件中存在 rownum 条件的话，则: 1： 假如 判定条件是常量，则： 只能 rownum = 1, SPOOL ON.SQL SQL SELECT ALTER VIEW |TNAME| COMPILE; FROM TAB; SQL SPOOL OFF 然后执行ON.SQL即可。 SQL ON.SQL 当然，授权和创建同义词也可以快速进行，如： SQL SELECT GRANT SELECT ON |TNAME| TO USERNAME; FROM TAB; SQL SELECT CREATE SYNONYM |TNAME| FOR USERNAME.|TNAME|; FROM TAB; 12读写文本型操作系统文件- 在PL/SQL 3.3以上的版本中，UTL_FILE包允许用户通过PL/SQL读写操作系统文件。如下： DECALRE FILE_HANDLE UTL_FILE.FILE_TYPE; BEGIN FILE_HANDLE:=UTL_FILE.FOPEN( C:,TEST.TXT,A); UTL_FILE.PUT_LINE(FILE_HANDLE,HELLO,ITS A TEST TXT FILE); UTL_FILE.FCLOSE(FILE_HANDLE); END; 13在数据库触发器中使用列的新值与旧值 - 在数据库触发器中几乎总是要使用触发器基表的列值，如果某条语句需要某列修改前的值，使用:OLD就可以了，使用某列修改后的新值，用:NEW就可以了。如:OLD.DEPT_NO,:NEW.DEPT_NO。 14数据库文件的移动方法 当想将数据库文件移动到另外一个目录下时，可以用ALTER DATABASE命令来移动(比ALTER TABLESPACE适用性强)： 1. 使用SERVER MANAGER关闭实例. SVRMGR connect internal; SVRMGR shutdown; SVRMGR exit; 2. 使用操作系统命令来移动数据库文件位置(假设这里操作系统为SOLARIS 2.6). 在UNIX中用 mv命令可以把文件移动到新的位置， #mv /ora13/orarun/document.dbf /ora12/orarun 3. 装载数据库并用alter database命令来改变数据库中的文件名. SVRMGR connect internal; SVRMGR startup mount RUN73; SVRMGR alter database rename file / ora13/orarun/document.dbf / ora12/orarun/document.dbf; 4. 启动实例. SVRMGR alter database open; 后才能去选rownum=2的行15连接查询结果： 表a 列 a1 a2 记录 1 a 1 b 2 x 2 y 2 z 用select能选成以下结果: 1 ab 2 xyz 下面有两个例子： 1.使用PL/SQL代码实现，但要求你组合后的长度不能超出Oracle varchar2长度的限制 create or replace type strings_table is table of varchar2(20); / create or replace function merge (pv in strings_table) return varchar2 is ls varchar2(4000); begin for i in 1.pv.count loop ls := ls | pv(i); end loop; return ls; end; / create table t (id number,name varchar2(10); insert into t values(1,Joan); insert into t values(1,Jack); insert into t values(1,Tom); insert into t values(2,Rose); insert into t values(2,Jenny); column names format a80; select t0.id,merge(cast(multiset(select name from t where t.id = t0.id) as strings_table) names from (select distinct id from t) t0; drop type strings_table; drop function merge; drop table t; 2.纯粹用sql： 表dept, emp 要得到如下结果 deptno, dname, employees - 10, accounting, clark;king;miller 20, research, smith;adams;ford;scott;jones 30, sales, allen;blake;martin;james;turners 每个dept的employee串起来作为一条记录返回 This example uses a max of 6, and would need more cut n pasting to do more than that： SQL select deptno, dname, emps 2 from ( 3 select d.deptno, d.dname, rtrim(e.ename |, | 4 lead(e.ename,1) over (partition by d.deptno 5 order by e.ename) |, | 6 lead(e.ename,2) over (partition by d.deptno 7 order by e.ename) |, | 8 lead(e.ename,3) over (partition by d.deptno 9 order by e.ename) |, | 10 lead(e.ename,4) over (partition by d.deptno 11 order by e.ename) |, | 12 lead(e.ename,5) over (partition by d.deptno 13 order by e.ename), ) emps, 14 row_number () over (partition by d.deptno 15 order by e.ename) x 16 from emp e, dept d 17 where d.deptno = e.deptno 18 ) 19 where x = 1 20 / DEPTNO DNAME EMPS - - - 10 ACCOUNTING CLARK, KING, MILLER 20 RESEARCH ADAMS, FORD, JONES, ROONEY, SCOTT, SMITH 30 SA16在Oracle中建一个编号会自动增加的字段,以利于查询 1、建立序列： CREATE SEQUENCE checkup_no_seq NOCYCLE MAXVALUE 9999999999 START WITH 2; 2、建立触发器： CREATE OR REPLACE TRIGGER set_checkup_no BEFORE INSERT ON checkup_history FOR EACH ROW DECLARE next_checkup_no NUMBER; BEGIN -Get the n