Oracle數據優化,超級全

時間 2019-11-19

原文原文鏈接

Oracle數據庫優化mysql

Oracle數據庫數據庫優化
–配置優化
1 硬件提升運行內存(內存條),帶寬(服務器分配2g 4g 5g)
2 配置文件物理結構,邏輯結構,內存結構(難須要較高Oracle基礎)sql

–sql優化
1)選擇最有效率的表名順序,基礎表放右邊
2)where子句條件寫後面,篩選最準確的寫後面
3)避免使用*,使用*會查數據字典
4)減小訪問數據庫次數(減小語句條數)
5)使用decode函數,好比count();sum()
6)使用rowid 或 rownum僞列
7)大批量sql中多使用commit
8)刪除表用truncate(是DDL不是DML)代替delete,數據不能被恢復
9)減小對錶的查詢
10)用(not)exists(存在)代替(no)in,用in代替or
12)多表查詢時,將關聯的表做爲基表能夠提升查詢效率
13)索引的使用(用於數據量大的表,特定列:重複數據小)能夠提升查詢效率
14)分區(分區將一張表分爲多張小表)
1共享數據
執行路徑:
ORACLE的這個功能大大地提升了SQL的執行性能並節省了內存的使用:
咱們發現,單表數據的統計比多表統計的速度徹底是兩個概念.單表統計可能只要0.02秒,可是2張表聯合統計就可能要幾十表了.
這是由於ORACLE只對簡單的表提供高速緩衝(cache buffering) ,這個功能並不適用於多表鏈接查詢…
數據庫管理員必須在init.ora中爲這個區域設置合適的參數(存放緩存的地方),當這個內存區域越大,就能夠保留更多的語句,固然被共享的可能性也就越大了.數據庫

當你向ORACLE提交一個SQL語句,ORACLE會首先在這塊內存中查找相同的語句.
這裏須要註明的是,ORACLE對二者採起的是一種嚴格匹配,要達成共享,SQL語句必須
徹底相同(包括空格,換行等).
1
2
3
共享的語句必須知足三個條件:(即從緩存區取數據)緩存

A.字符級的比較:
當前被執行的語句和共享池中的語句必須徹底相同.
1
2
例如:
SELECT * FROM EMP;
和下列每個都不一樣
SELECT * from EMP;
Select * From Emp;
SELECT * FROM EMP;安全

B.兩個語句所指的對象必須徹底相同:
同義詞即別名 public公有的別名能夠共享,私有的不能夠

用戶對象名如何訪問服務器

Jack sal_limit private synonym
Work_city public synonym
Plant_detail public synonym
Jill sal_limit private synonym
Work_city public synonym
Plant_detail table owner
考慮一下下列SQL語句可否在這兩個用戶之間共享.session

SQL 可否共享緣由oracle

select max(sal_cap) from sal_limit; 不能每一個用戶都有一個private synonym - sal_limit , 它們是不一樣的對象
select count(*) from work_city where sdesc like 'NEW%'; 能兩個用戶訪問相同的對象public synonym - work_city
select a.sdesc,b.location from work_city a , plant_detail b where a.city_id = b.city_id 不能
用戶jack 經過private synonym訪問plant_detail 而jill 是表的全部者,對象不一樣.函數

C.兩個SQL語句中必須使用相同的名字的綁定變量(bind variables)工具

例如：第一組的兩個SQL語句是相同的(能夠共享),而第二組中的兩個語句是不一樣的(即便在運行時,賦於不一樣的綁定變量相同的值)

a.
select pin , name from people where pin = :blk1.pin;
select pin , name from people where pin = :blk1.pin;
b.
select pin , name from people where pin = :blk1.ot_ind;
select pin , name from people where pin = :blk1.ov_ind;
重點關注1:選擇最有效率的表名順序(只在基於規則的優化器中有效)重點關注
ORACLE的解析器按照從右到左的順序處理FROM子句中的表名,所以FROM子句中寫在最後的表(基礎表 driving table)將被最早處理. 在FROM子句中包含多個表的狀況下,你必須選擇記錄條數最少的表做爲基礎表.當ORACLE處理多個表時, 會運用排序及合併的方式鏈接它們.首先,掃描第一個表(FROM子句中最後的那個表)並對記錄進行派序,而後掃描第二個表(FROM子句中最後第二個表),最後將全部從第二個表中檢索出的記錄與第一個表中合適記錄進行合併.
例如: 表 TAB1 16,384 條記錄
表 TAB2 1 條記錄
選擇TAB2做爲基礎表 (最好的方法)

select count(*) from tab1,tab2 執行時間0.96秒
選擇TAB2做爲基礎表 (不佳的方法)
select count(*) from tab2,tab1 執行時間26.09秒

若是有3個以上的錶鏈接查詢, 那就須要選擇交叉表(intersection table)做爲基礎表, 交叉表是指那個被其餘表所引用的表.
例如: EMP表描述了LOCATION表和CATEGORY表的交集.

複製代碼
SELECT *
FROM LOCATION L ,
CATEGORY C,
EMP E
WHERE E.EMP_NO BETWEEN 1000 AND 2000
AND E.CAT_NO = C.CAT_NO
AND E.LOCN = L.LOCN
將比下列SQL更有效率
SELECT *
FROM EMP E ,
LOCATION L ,
CATEGORY C
WHERE E.CAT_NO = C.CAT_NO
AND E.LOCN = L.LOCN
AND E.EMP_NO BETWEEN 1000 AND 2000
複製代碼

重點關注2:WHERE子句中的鏈接順序,條件寫後面．重點關注

ORACLE採用自下而上的順序解析WHERE子句,根據這個原理,表之間的鏈接必須寫在其餘WHERE條件以前, 那些能夠過濾掉最大數量記錄的條件必須寫在WHERE子句的末尾.
例如:

複製代碼
(低效,執行時間156.3秒)
SELECT …
FROM EMP E
WHERE SAL >; 50000
AND JOB = ‘MANAGER’
AND 25 < (SELECT COUNT(*) FROM EMP
WHERE MGR=E.EMPNO);
(高效,執行時間10.6秒)
SELECT …
FROM EMP E
WHERE 25 < (SELECT COUNT(*) FROM EMP
WHERE MGR=E.EMPNO)
AND SAL >; 50000
AND JOB = ‘MANAGER’;
複製代碼
重點關注3:SELECT子句中避免使用 ‘ * ‘,使用*會先查數據字典好比:user_tab_ column,從數據字典找字段．重點關注

當你想在SELECT子句中列出全部的COLUMN時,使用動態SQL列引用 ‘*’ 是一個方便的方法.不幸的是,這是一個很是低效的方法. 實際上,ORACLE在解析的過程當中, 會將’*’ 依次轉換成全部的列名, 這個工做是經過查詢數據字典完成的, 這意味着將耗費更多的時間.
7. 減小訪問數據庫的次數
當執行每條SQL語句時, ORACLE在內部執行了許多工做: 解析SQL語句, 估算索引的利用率, 綁定變量 , 讀數據塊等等. 因而可知, 減小訪問數據庫的次數 , 就能實際上減小ORACLE的工做量.
例如,
如下有三種方法能夠檢索出僱員號等於0342或0291的職員.

複製代碼
方法1 (最低效)
SELECT EMP_NAME , SALARY , GRADE
FROM EMP
WHERE EMP_NO = 342;
SELECT EMP_NAME , SALARY , GRADE
FROM EMP
WHERE EMP_NO = 291;
方法2 (次低效)
DECLARE
CURSOR C1 (E_NO NUMBER) IS
SELECT EMP_NAME,SALARY,GRADE
FROM EMP
WHERE EMP_NO = E_NO;
BEGIN
OPEN C1(342);
FETCH C1 INTO …,..,.. ;
OPEN C1(291);
FETCH C1 INTO …,..,.. ;
CLOSE C1;
END;
方法3 (高效)
SELECT A.EMP_NAME , A.SALARY , A.GRADE,
B.EMP_NAME , B.SALARY , B.GRADE
FROM EMP A,EMP B
WHERE A.EMP_NO = 342
or B.EMP_NO = 291;
複製代碼
注意:
在SQL*Plus , SQL*Forms和Pro*C中從新設置ARRAYSIZE參數, 能夠增長每次數據庫訪問的檢索數據量 ,建議值爲200.

重點關注4:使用DECODE函數來減小處理時間.重點關注
使用DECODE函數能夠避免重複掃描相同記錄或重複鏈接相同的表.
例如:

複製代碼
SELECT COUNT(*)，SUM(SAL)
FROM　EMP
WHERE DEPT_NO = 0020
AND ENAME LIKE　‘SMITH%’;
SELECT COUNT(*)，SUM(SAL)
FROM　EMP
WHERE DEPT_NO = 0030
AND ENAME LIKE　‘SMITH%’;
複製代碼

你能夠用DECODE函數高效地獲得相同結果

SELECT COUNT(DECODE(DEPT_NO,0020,’X’,NULL)) D0020_COUNT,
COUNT(DECODE(DEPT_NO,0030,’X’,NULL)) D0030_COUNT,
SUM(DECODE(DEPT_NO,0020,SAL,NULL)) D0020_SAL,
SUM(DECODE(DEPT_NO,0030,SAL,NULL)) D0030_SAL
FROM EMP WHERE ENAME LIKE ‘SMITH%’;

相似的,DECODE函數也能夠運用於GROUP BY 和ORDER BY子句中.

重點關注5: 刪除重複記錄.重點關注

最高效的刪除重複記錄方法 ( 由於使用了ROWID)

DELETE FROM EMP E
WHERE E.ROWID > (SELECT MIN(X.ROWID)
FROM EMP X
WHERE X.EMP_NO = E.EMP_NO);
重點關注6: 用TRUNCATE替代DELETE.重點關注

當刪除表中的記錄時,在一般狀況下, 回滾段(rollback segments ) 用來存放能夠被恢復的信息.
若是你沒有COMMIT事務,ORACLE會將數據恢復到刪除以前的狀態(準確地說是恢復到執行刪除命令以前的情況)
而當運用TRUNCATE時, 回滾段再也不存聽任何可被恢復的信息.當命令運行後,數據不能被恢復.所以不多的資源被調用,執行時間也會很短.
(譯者按: TRUNCATE只在刪除全表適用,TRUNCATE是DDL不是DML)

重點關注7: 儘可能多使用COMMIT.重點關注

只要有可能,在程序中儘可能多使用COMMIT, 這樣程序的性能獲得提升,需求也會由於COMMIT所釋放的資源而減小:
COMMIT所釋放的資源:
a. 回滾段上用於恢復數據的信息.
b. 被程序語句得到的鎖
c. redo log buffer 中的空間
d. ORACLE爲管理上述3種資源中的內部花費
(譯者按: 在使用COMMIT時必需要注意到事務的完整性,現實中效率和事務完整性每每是魚和熊掌不可得兼)
重點關注8:減小對錶的查詢.重點關注

在含有子查詢的SQL語句中,要特別注意減小對錶的查詢.

例如:
複製代碼
低效
SELECT TAB_NAME
FROM TABLES
WHERE TAB_NAME = ( SELECT TAB_NAME
FROM TAB_COLUMNS
WHERE VERSION = 604)
AND　DB_VER= ( SELECT DB_VER
FROM TAB_COLUMNS
WHERE VERSION = 604)
高效
SELECT TAB_NAME
FROM TABLES
WHERE (TAB_NAME,DB_VER)
= ( SELECT TAB_NAME,DB_VER)
FROM TAB_COLUMNS
WHERE VERSION = 604)
Update 多個Column 例子:
低效:
UPDATE EMP
SET EMP_CAT = (SELECT MAX(CATEGORY) FROM EMP_CATEGORIES),
SAL_RANGE = (SELECT MAX(SAL_RANGE) FROM EMP_CATEGORIES)
WHERE EMP_DEPT = 0020;
高效:
UPDATE EMP
SET (EMP_CAT, SAL_RANGE)
= (SELECT MAX(CATEGORY) , MAX(SAL_RANGE)
FROM EMP_CATEGORIES)
WHERE EMP_DEPT = 0020;
複製代碼

重點關注9:用EXISTS替代IN.重點關注

在許多基於基礎表的查詢中,爲了知足一個條件,每每須要對另外一個表進行聯接.在這種狀況下, 使用EXISTS(或NOT EXISTS)一般將提升查詢的效率.

複製代碼
低效:
SELECT *
FROM EMP (基礎表)
WHERE EMPNO > 0
AND DEPTNO IN (SELECT DEPTNO
FROM DEPT
WHERE LOC = ‘MELB’)
高效:
SELECT *
FROM EMP (基礎表)
WHERE EMPNO > 0
AND EXISTS (SELECT ‘X’
FROM DEPT
WHERE DEPT.DEPTNO = EMP.DEPTNO
AND LOC = ‘MELB’)
複製代碼

(譯者按: 相對來講,用NOT EXISTS替換NOT IN 將更顯著地提升效率,下一節中將指出)
重點關注10:用NOT EXISTS替代NOT IN .重點關注

在子查詢中,NOT IN子句將執行一個內部的排序和合並. 不管在哪一種狀況下,NOT IN都是最低效的 (由於它對子查詢中的表執行了一個全表遍歷). 爲了不使用NOT IN ,咱們能夠把它改寫成外鏈接(Outer Joins)或NOT EXISTS.
例如:

SELECT …
FROM EMP
WHERE DEPT_NO NOT IN (SELECT DEPT_NO
FROM DEPT
WHERE DEPT_CAT=’A’);

爲了提升效率.改寫爲:

複製代碼
(方法一: 高效)
SELECT ….
FROM EMP A,DEPT B
WHERE A.DEPT_NO = B.DEPT(+)
AND B.DEPT_NO IS NULL
AND B.DEPT_CAT(+) = ‘A’
(方法二: 最高效)
SELECT ….
FROM EMP E
WHERE NOT EXISTS (SELECT ‘X’
FROM DEPT D
WHERE D.DEPT_NO = E.DEPT_NO
AND DEPT_CAT = ‘A’);
複製代碼

固然,最高效率的方法是有表關聯.直接兩表關係對聯的速度是最快的!
重點關注11:識別’低效執行’的SQL語句.重點關注

用下列SQL工具找出低效SQL:

複製代碼
SELECT EXECUTIONS , DISK_READS, BUFFER_GETS,
ROUND((BUFFER_GETS-DISK_READS)/BUFFER_GETS,2) Hit_radio,
ROUND(DISK_READS/EXECUTIONS,2) Reads_per_run,
SQL_TEXT
FROM V$SQLAREA
WHERE EXECUTIONS>0
AND BUFFER_GETS >0
AND (BUFFER_GETS-DISK_READS)/BUFFER_GETS < 0.8
ORDER BY 4 DESC;

##1.sql語言是否徹底相同空格大小寫問題
select * from emp;
select * from emp;
select * from EMP;
##2.綁定變量的使用
select * from emp where empno=10; Statement
select * from emp where empno=:empno; PreparedStatement
##3.減小或避免*的出現 *號須要先訪問數據字典表，找到該表中全部的字段名，而後替換*號
select EMPNO,ENAME,JOB from EMP where EMPNO=:EMPNO;
##4.多表查詢時，基表的選擇 dept 表1行數據 emp 1000行數據 from後跟的最後一張表叫基表
select count(*) from user_tables;
select count(owner) from dba_tables;
select count(distinct owner) from dba_tables;
##5.將小表做爲基表，放到from最後一個位置
select * from emp,dept where emp.deptno = dept.deptno;

##6.員工表emp 部門表dept 績效表 empno days 三張表，將中間表做爲基表
select * from dept,jixiao,emp where emp.empno=jixiao.empno and emp.deptno=dept.deptno;

select * from emp join dept
on emp.deptno=dept.deptno
join jixiao
on emp.empno = jixiao.empno;

##7.顯示員工編號，部門號，工資（部門編號爲 10 而且工資大於3000）
where 先寫錶鏈接，後寫篩選條件
篩選條件從後往前執行，剩餘數據最少的條件放到後面位置
select e.empno,d.deptno,sal
from emp e, dept d
where e.deptno = d.deptno and d.deptno=10 and sal>3000 ;
##8.刪除重複記錄 rowid
select emp.*,rowid from emp;
##9.建立表結構
create table emp1 as select * from scott.emp;

select * from emp1;
insert into emp1 select * from www.xgll521.com scott.emp where sal>3000;

select count(empno) from emp1;
select count(distinct empno) from emp1;
##10.刪除重複記錄
select * from emp1 e where rowid > (select min(rowid) from emp1 where e.empno=emp1.empno);
delete from emp1 e where rowid > (select min(rowid) from emp1 where e.empno=emp1.empno);

delete from emp1 e where rowid < (select max(rowid) from emp1 where e.empno=emp1.empno);

##11.刪除全部數據 truncate 代替delete刪除全部數據
delete truncate

##12.大批量sql中多使用commit

##13.用EXISTS替代IN

select * from emp where deptno=10 or deptno=20;
select * from emp where deptno in (10,20);
select * from dept;

SELECT *
   FROM EMP
   WHERE EMPNO > 0
   AND DEPTNO IN (SELECT DEPTNO
   FROM DEPT
   WHERE LOC = 'NEW YORK');

   SELECT *
   FROM EMP
   WHERE EMPNO > 0
   AND EXISTS (SELECT www.dongfan178.com 'X'
   FROM DEPT
   WHERE DEPT.DEPTNO = EMP.DEPTNO
   AND LOC = 'NEW YORK');

SELECT *
   FROM EMP
   WHERE EMPNO > 0
   AND DEPTNO not IN (SELECT DEPTNO
   FROM DEPT
   WHERE LOC = 'NEW YORK');

SELECT *
   FROM EMP
   WHERE EMPNO > 0
   AND not EXISTS (SELECT 'X'
   FROM DEPT
   WHERE DEPT.DEPTNO = EMP.DEPTNO
   AND LOC = 'NEW YORK');

清除緩存
   ALTER SYSTEM FLUSH SHARED_POOL;
   ALTER SYSTEM FLUSH BUFFER_CACHE;
   ALTER SYSTEM FLUSH GLOBAL CONTEXT;

##查看sql語句的執行效率
SELECT EXECUTIONS , DISK_READS, BUFFER_GETS,
   ROUND((BUFFER_www.ysyl157.com GETS-DISK_READS)/BUFFER_GETS,2) Hit_radio,
   ROUND(DISK_READS/EXECUTIONS,2) Reads_per_run,
   SQL_TEXT
   FROM V$SQLAREA
   WHERE EXECUTIONS>0
   AND BUFFER_GETS > 0
   AND (BUFFER_GETS-DISK_READS)/BUFFER_GETS < 0.8
   ORDER BY 4 DESC;

##若是sql鎖定(及其餘用戶在用着這張表,tx在事務狀態,tm)，釋放鎖
SELECT s.sid, s.serial#, s.username, s.schemaname, s.osuser, s.process, s.machine,
s.terminal, s.logon_time, l.type
FROM v$session s, v$lock l
WHERE s.sid = l.sid
AND s.username='SCOTT'
ORDER BY sid;

釋放鎖殺進程
alter system kill session www.mcyllpt.com'sid,serial#';
alter system kill session '130,1737';

##index（索引）
##使用索引（在表中特定列上使用索引）提升查詢效率，對數據進行檢查（檢查數據完整性 -- 惟一索引）
##何時適合使用索引提升效率
1.表中數據量大
2.該列重複數據很是小
##使用索引的劣勢
1.索引下降dml操做的效率
2.若是表數據量小，重複數據多，使用索引反而會下降查詢效率
索引經常使用的分類
普通索引 -- 提升查詢效率 index
惟一索引 -- 檢查數據完整性，提升效率 unique index
複合索引 -- 針對同時查詢的多個列，同時創建索引

刪除索引
drop index indexname;
建立索引
create index idx_emp_empno on emp(empno);
create unique index idx_emp_empno on emp(empno);

select * from emp where mgr='7902' and job='SALESMAN';
create index idx_emp_job_mgr on emp(job,mgr);

##partition（分區） rac集羣

表數據量很是大的狀況下，寫入、查詢效率很是低,使用表分區策略
表分區策略主要是將一張表分爲多張小表，多外是一張表，可是底層有多張表組成，能夠放置到多個表空間，多個數據文件中

分區方法：
範圍分區（數值範圍，時間範圍）
列表分區（根據散列值分區根據倉庫編號定位）北京庫南京庫鄭州庫
Hash分區
複合分區結合範圍和列表進行分區

CREATE TABLE EMPLOYEE_RANGE_PART
2 ( EMPNO NUMBER(4,0),
3 ENAME VARCHAR2(10),
4 JOB VARCHAR2(9),
5 MGR NUMBER(4,0),
6 HIREDATE DATE,
7 SAL NUMBER(7,2),
8 COMM NUMBER(7,2),
9 DEPTNO NUMBER(2,0)
10 )
11 PARTITION BY RANGE (HIREDATE)
12 (
13 PARTITION EMPLOYEE_PART01 VALUES LESS THAN (TO_DATE('1981-01-01','yyyy-mm-dd'))
14 TABLESPACE users,
15 PARTITION EMPLOYEE_PART02 VALUES LESS THAN (TO_DATE('1982-01-01','yyyy-mm-dd'))
16 TABLESPACE users,
17 PARTITION EMPLOYEE_PART03 VALUES LESS THAN (MAXVALUE)
18 TABLESPACE users
19 );

hash分區
CREATE TABLE "EMPLOYEE_HASH_PART"
2 ( "EMPNO" NUMBER(4,0),
3 "ENAME" VARCHAR2(10),
4 "JOB" VARCHAR2(9),
5 "MGR" NUMBER(4,0),
6 "HIREDATE" DATE,
7 "SAL" NUMBER(7,2),
8 "COMM" NUMBER(7,2),
9 "DEPTNO" NUMBER(2,0)
10 )
11 PARTITION BY HASH (ENAME)
12 (
13 PARTITION EMPLOYEE_PART01 TABLESPACE test_tbs_01,
14 PARTITION EMPLOYEE_PART02 TABLESPACE test_tbs_02
15 );

列表分區
CREATE TABLE "EMPLOYEE_yongshiyule178.com LIST_PART"
2 ( "EMPNO" NUMBER(4,0),
3 "ENAME" VARCHAR2(10),
4 "JOB" VARCHAR2(9),
5 "MGR" NUMBER(4,0),
6 "HIREDATE" DATE,
7 "SAL" NUMBER(7,2),
8 "COMM" NUMBER(7,2),
9 "DEPTNO" NUMBER(2,0)
10 )
11 PARTITION BY LIST (JOB)
12 (
13 PARTITION EMPLOYEE_PART01 VALUES ('PRESIDENT','MANAGER','ANALYST')
14 TABLESPACE test_tbs_01,
15 PARTITION EMPLOYEE_PART02 VALUES ('CLERK')
16 TABLESPACE test_tbs_02,
17 PARTITION EMPLOYEE_PART03 VALUES (DEFAULT)
18 TABLESPACE test_tbs_03
19 );

查看錶空間
select * from user_tablespaces;
建立表空間
create tablespace tablename datafile '數據文件路徑' size 表空間大小;
create tablespace www.yigouyule2.cn data_www.michenggw.com test datafile 'e:\oracle\oradata\test\data_1.dbf' size 2000M;
##OLTP OLAP

OLTP online transaction process 聯機事務處理事務（側重於數據完整性)用於安全級別高的,好比下單

OLAP online analytical process 聯機分析處理（效率）（好比推廣數據，分區、索引、rac集羣） sqlplus /nolog

mysql：myisam（可使用全文索引，不能使用事務） innodb（事務，不能使用全文索引）