用數據泵技術實現邏輯備份Oracle 11g R2 數據泵技術詳解（expdp impdp）

用數據泵技術實現邏輯備份

from:https://blog.csdn.net/weixin_41078837/article/details/80618916

邏輯備份概述

邏輯備份時建立數據庫對象的邏輯副本，並存入一個二進制轉儲文件的過程。從本質上來說邏輯備份與恢復實際就是對數據庫事實數據的導入和導出。

導出：

導出就是數據庫的邏輯備份，實質是讀取一個數據庫記錄並將這個記錄集寫入一個文件（擴展名一般是dmp），這些記錄的導出與物理位置無關

導入：

導入即數據庫的邏輯恢復，實質是讀取被導出的二進制轉儲文件並將其恢復到數據庫。

使用數據泵技術導入/導出

數據泵（DATA PUMP）是一種在數據庫之間或在數據庫與操做系統之間高速傳輸數據的技術。數據泵工具運行在服務器上，數據庫管理員須要指定數據庫目錄來保存轉儲的數據。

鏈接oracle 數據庫

 

建立一個操做目錄

 

Default Locations for Dump, Log, and SQL Files

Because Data Pump is server-based rather than client-based, dump files, log files, and SQL files are accessed relative to server-based directory paths. Data Pump requires that directory paths be specified as directory objects. A directory object maps a name to a directory path on the file system. DBAs must ensure that only approved users are allowed access to the directory object associated with the directory path.

The following example shows a SQL statement that creates a directory object named dpump_dir1 that is mapped to a directory located at /usr/apps/datafiles.

SQL> CREATE DIRECTORY dpump_dir1 AS '/usr/apps/datafiles';

The reason that a directory object is required is to ensure data security and integrity. For example:

• If you were allowed to specify a directory path location for an input file, then you might be able to read data that the server has access to, but to which you should not.

• If you were allowed to specify a directory path location for an output file, then the server might overwrite a file that you might not normally have privileges to delete.

On UNIX and Windows operating systems, a default directory object, DATA_PUMP_DIR, is created at database creation or whenever the database dictionary is upgraded. By default, it is available only to privileged users. (The user SYSTEM has read and write access to the DATA_PUMP_DIR directory, by default.)

If you are not a privileged user, then before you can run Data Pump Export or Data Pump Import, a directory object must be created by a database administrator (DBA) or by any user with the CREATE ANYDIRECTORY privilege.

After a directory is created, the user creating the directory object must grant READ or WRITE permission on the directory to other users. For example, to allow the Oracle database to read and write files on behalf of user hr in the directory named by dpump_dir1, the DBA must execute the following command:

SQL> GRANT READ, WRITE ON DIRECTORY dpump_dir1 TO hr;

Note that READ or WRITE permission to a directory object only means that the Oracle database can read or write files in the corresponding directory on your behalf. You are not given direct access to those files outside of the Oracle database unless you have the appropriate operating system privileges. Similarly, the Oracle database requires permission from the operating system to read and write files in the directories.

Data Pump Export and Import use the following order of precedence to determine a file's location:

1. If a directory object is specified as part of the file specification, then the location specified by that directory object is used. (The directory object must be separated from the file name by a colon.)

2. If a directory object is not specified as part of the file specification, then the directory object named by the DIRECTORY parameter is used.

3. If a directory object is not specified as part of the file specification, and if no directory object is named by the DIRECTORY parameter, then the value of the environment variable, DATA_PUMP_DIR, is used. This environment variable is defined using operating system commands on the client system where the Data Pump Export and Import utilities are run. The value assigned to this client-based environment variable must be the name of a server-based directory object, which must first be created on the server system by a DBA. For example, the following SQL statement creates a directory object on the server system. The name of the directory object is DUMP_FILES1, and it is located at '/usr/apps/dumpfiles1'.

   SQL> CREATE DIRECTORY DUMP_FILES1 AS '/usr/apps/dumpfiles1';
   

   Then, a user on a UNIX-based client system using csh can assign the value DUMP_FILES1 to the environment variable DATA_PUMP_DIR. The DIRECTORY parameter can then be omitted from the command line. The dump file employees.dmp, and the log file export.log, are written to '/usr/apps/dumpfiles1'.

   %setenv DATA_PUMP_DIR DUMP_FILES1
   %expdp hr TABLES=employees DUMPFILE=employees.dmp
   

4. If none of the previous three conditions yields a directory object and you are a privileged user, then Data Pump attempts to use the value of the default server-based directory object, DATA_PUMP_DIR. This directory object is automatically created at database creation or when the database dictionary is upgraded. You can use the following SQL query to see the path definition for DATA_PUMP_DIR:

   SQL> SELECT directory_name, directory_path FROM dba_directories
   2 WHERE directory_name='DATA_PUMP_DIR';
   

   If you are not a privileged user, then access to the DATA_PUMP_DIR directory object must have previously been granted to you by a DBA.

   Do not confuse the default DATA_PUMP_DIR directory object with the client-based environment variable of the same name.

授予用戶操做dump_dir目錄的權限

 

使用EXPDP命令導出數據（能夠按照表導出，按照用戶模式導出，按照表空間導出和全庫導出），使用IMPDP命令導入數據（能夠按照表導入，按照用戶模式導入，按照表空間導出和全庫導入）。

使用基於命令行的數據泵技術對數據庫實施導入和導出。

SQL>col DIRECTORY_NAME for a20

SQL>col DIRECTOR_PATH for a60

SQL>col OWNER for a8

 

建立測試用戶tom並受權

 

導出SCOTT用戶下的emp和dept表

[oracle@dbserver~]$ expdp scott/oracle directory=dump_dir dumpfile=scotttab.dmp tables=emp,dept

 

以SCOTT用戶鏈接，刪除SCOTT用戶下的EMP表

 

導入emp表

[oracle@dbserver~]$ impdp scott/oracle directory=dump_dir dumpfile=scotttab.dmp tables=emp

 

emp表已經導入成功了。

 

將導出的SCOTT用戶下的DEPT表和EMP表導入到tom用戶下

[oracle@dbserver~]$ impdp system/oracle11g directory=dump_dir dumpfile=scotttab.dmptables=scott.emp,scott.dept REMAP_SCHEMA=SCOTT:TOM

 

查看導入的結果，使用tom用戶鏈接

 

導出表空間

 

在xx表空間上建立一個表aa，併爲表插入記錄

 

導出表空間

 

刪除表空間xx的同時刪除數據文件

 

aa表沒有了。

 

導入表空間

導入表空間以前，須要建立一個xx表空間

 

導入表空間xx

 

驗證，aa表恢復回來了。

 

導出全庫

[oracle@dbserverorcl]$ expdp system/oracle11g directory=dump_dir dumpfile=full.dmp full=y

 

 

導入全庫

[oracle@dbserverorcl]$ impdp system/oracle11g directory=dump_dir dumpfile=full.dmp full=y

expdp impdp 數據庫導入導出命令詳解

 

jamm118關注 0人評論38774人閱讀2010-05-05 11:31:07

 

1、建立邏輯目錄，該命令不會在操做系統建立真正的目錄，最好以system等管理員建立。
create directory dpdata1 as 'd:\test\dump';

2、查看管理理員目錄（同時查看操做系統是否存在，由於Oracle並不關心該目錄是否存在，若是不存在，則出錯）
select * from dba_directories;

3、給scott用戶賦予在指定目錄的操做權限，最好以system等管理員賦予。
grant read,write on directory dpdata1 to scott;

4、導出數據
1)按用戶導
expdp scott/tiger@orcl schemas=scott dumpfile=expdp.dmp DIRECTORY=dpdata1;
2)並行進程 parallel
expdp scott/tiger@orcl directory=dpdata1 dumpfile=scott3.dmp parallel=40 job_name=scott3
3)按表名導
expdp scott/tiger@orcl TABLES=emp,dept dumpfile=expdp.dmp DIRECTORY=dpdata1;
4)按查詢條件導
expdp scott/tiger@orcl directory=dpdata1 dumpfile=expdp.dmp Tables=emp query='WHERE deptno=20';
5)按表空間導
expdp system/manager DIRECTORY=dpdata1 DUMPFILE=tablespace.dmp TABLESPACES=temp,example;
6)導整個數據庫
expdp system/manager DIRECTORY=dpdata1 DUMPFILE=full.dmp FULL=y;

5、還原數據
1)導到指定用戶下
impdp scott/tiger DIRECTORY=dpdata1 DUMPFILE=expdp.dmp SCHEMAS=scott;
2)改變表的 owner
impdp system/manager DIRECTORY=dpdata1 DUMPFILE=expdp.dmp TABLES=scott.dept REMAP_SCHEMA=scott:system;
3)導入表空間
impdp system/manager DIRECTORY=dpdata1 DUMPFILE=tablespace.dmp TABLESPACES=example;
4)導入數據庫
impdb system/manager DIRECTORY=dump_dir DUMPFILE=full.dmp FULL=y;
5)追加數據
impdp system/manager DIRECTORY=dpdata1 DUMPFILE=expdp.dmp SCHEMAS=system TABLE_EXISTS_ACTION=append;

----------------------------Expdp/Impdp的相關參數----------------------------

EXPDP命令行選項
1. ATTACH
該選項用於在客戶會話與已存在導出做用之間創建關聯.語法以下
ATTACH=[schema_name.]job_name
Schema_name 用於指定方案名,job_name用於指定導出做業名.注意,若是使用ATTACH選項,在命令行除了鏈接字符串和ATTACH選項外,不能指定任何其餘選項,示例以下 :
Expdp scott/tiger ATTACH=scott.export_job
2. CONTENT
該選項用於指定要導出的內容.默認值爲 ALL
CONTENT={ALL | DATA_ONLY | METADATA_ONLY}
當設置CONTENT爲ALL 時,將導出對象定義及其全部數據.爲DATA_ONLY時,只導出對象數據,爲METADATA_ONLY時,只導出對象定義
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dump
CONTENT=METADATA_ONLY
3. DIRECTORY
指定轉儲文件和日誌文件所在的目錄
DIRECTORY=directory_object
Directory_object 用於指定目錄對象名稱.須要注意,目錄對象是使用CREATE DIRECTORY語句創建的對象,而不是OS 目錄
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dump
創建目錄 :
CREATE DIRECTORY dump as ‘d:dump’;
查詢建立了那些子目錄 :
SELECT * FROM dba_directories;
4. DUMPFILE
用於指定轉儲文件的名稱,默認名稱爲 expdat.dmp
DUMPFILE=[directory_object:]file_name [,….]
Directory_object用於指定目錄對象名,file_name用於指定轉儲文件名.須要注意,若是不指定directory_object,導出工具會自動使用DIRECTORY選項指定的目錄對象
Expdp scott/tiger DIRECTORY=dump1 DUMPFILE=dump2:a.dmp
5. ESTIMATE
指定估算被導出表所佔用磁盤空間分方法.默認值是 BLOCKS
EXTIMATE={BLOCKS | STATISTICS}
設置爲BLOCKS時,oracle會按照目標對象所佔用的數據塊個數乘以數據塊尺寸估算對象佔用的空間,設置爲STATISTICS時,根據最近統計值估算對象佔用空間
Expdp scott/tiger TABLES=emp ESTIMATE=STATISTICS
DIRECTORY=dump DUMPFILE=a.dump
6. EXTIMATE_ONLY
指定是否只估算導出做業所佔用的磁盤空間,默認值爲 N
EXTIMATE_ONLY={Y | N}
設置爲Y時,導出做用只估算對象所佔用的磁盤空間,而不會執行導出做業,爲N時,不只估算對象所佔用的磁盤空間,還會執行導出操做 .
Expdp scott/tiger ESTIMATE_ONLY=y NOLOGFILE=y
7. EXCLUDE
該選項用於指定執行操做時釋放要排除對象類型或相關對象
EXCLUDE=object_type[:name_clause] [,….]
Object_type 用於指定要排除的對象類型,name_clause用於指定要排除的具體對象.EXCLUDE和INCLUDE不能同時使用
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dup EXCLUDE=VIEW
8. FILESIZE
指定導出文件的最大尺寸,默認爲0,(表示文件尺寸沒有限制 )
9. FLASHBACK_SCN
指定導出特定SCN時刻的表數據
FLASHBACK_SCN=scn_value
Scn_value 用於標識SCN值.FLASHBACK_SCN和FLASHBACK_TIME不能同時使用
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp
FLASHBACK_SCN=358523
10. FLASHBACK_TIME
指定導出特定時間點的表數據
FLASHBACK_TIME=」TO_TIMESTAMP(time_value)」
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp FLASHBACK_TIME=
「TO_TIMESTAMP(’25-08-2004 14:35:00’,’DD-MM-YYYY HH24:MI:SS’)」

11. FULL
指定數據庫模式導出,默認爲 N
FULL={Y | N}
爲Y時,標識執行數據庫導出 .
12. HELP
指定是否顯示EXPDP命令行選項的幫助信息,默認爲 N
當設置爲Y時,會顯示導出選項的幫助信息 .
Expdp help=y
13. INCLUDE
指定導出時要包含的對象類型及相關對象
INCLUDE = object_type[:name_clause] [,… ]
14. JOB_NAME
指定要導出做用的名稱,默認爲 SYS_XXX
JOB_NAME=jobname_string
15. LOGFILE
指定導出日誌文件文件的名稱,默認名稱爲 export.log
LOGFILE=[directory_object:]file_name
Directory_object用於指定目錄對象名稱,file_name用於指定導出日誌文件名.若是不指定directory_object.導出做用會自動使用DIRECTORY的相應選項值 .
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp logfile=a.log
16. NETWORK_LINK
指定數據庫鏈名,若是要將遠程數據庫對象導出到本地例程的轉儲文件中,必須設置該選項 .
17. NOLOGFILE
該選項用於指定禁止生成導出日誌文件,默認值爲 N.
18. PARALLEL
指定執行導出操做的並行進程個數,默認值爲 1
19. PARFILE
指定導出參數文件的名稱
PARFILE=[directory_path] file_name
20. QUERY
用於指定過濾導出數據的where條件
QUERY=[schema.] [table_name:] query_clause
Schema  用於指定方案名,table_name用於指定表名,query_clause用於指定條件限制子句.QUERY選項不能與 CONNECT=METADATA_ONLY,EXTIMATE_ONLY,TRANSPORT_TABLESPACES等選項同時使用 .
Expdp scott/tiger directory=dump dumpfiel=a.dmp
Tables=emp query=’WHERE deptno=20’
21. SCHEMAS
該方案用於指定執行方案模式導出,默認爲當前用戶方案 .
22. STATUS
指定顯示導出做用進程的詳細狀態,默認值爲 0
23. TABLES
指定表模式導出
TABLES=[schema_name.]table_name[:partition_name][,…]
Schema_name 用於指定方案名,table_name用於指定導出的表名,partition_name用於指定要導出的分區名 .
24. TABLESPACES
指定要導出表空間列表
25. TRANSPORT_FULL_CHECK
該選項用於指定被搬移表空間和未搬移表空間關聯關係的檢查方式,默認爲 N.
當設置爲Y時,導出做用會檢查表空間直接的完整關聯關係,若是表空間所在表空間或其索引所在的表空間只有一個表空間被搬移,將顯示錯誤信息.當設置爲N時, 導出做用只檢查單端依賴,若是搬移索引所在表空間,但未搬移表所在表空間,將顯示出錯信息,若是搬移表所在表空間,未搬移索引所在表空間,則不會顯示錯誤信息 .
26. TRANSPORT_TABLESPACES
指定執行表空間模式導出
27. VERSION
指定被導出對象的數據庫版本,默認值爲 COMPATIBLE.
VERSION={COMPATIBLE | LATEST | version_string}
爲COMPATIBLE時,會根據初始化參數COMPATIBLE生成對象元數據;爲LATEST時,會根據數據庫的實際版本生成對象元數據.version_string用於指定數據庫版本字符串.調用 EXPDP
使用EXPDP工具時,其轉儲文件只能被存放在DIRECTORY對象對應的OS目錄中,而不能直接指定轉儲文件所在的OS目錄.所以 ,
使用EXPDP工具時,必須首先創建DIRECTORY對象.而且須要爲數據庫用戶授予使用DIRECTORY對象權限.

-------------------------------------應用-------------------------------------

Data Pump 反映了整個導出/導入過程的徹底革新。不使用常見的 SQL 命令，而是應用專用 API（direct path api etc) 來以更快得多的速度加載和卸載數據。

1.Data Pump  導出  expdp
例子：
sql>create directory dpdata1 as '/u02/dpdata1';
sql>grant read, write on directory dpdata1 to ananda;
$expdp ananda/abc123 tables=CASES directory=DPDATA1 dumpfile=expCASES.dmp   job_name=CASES_EXPORT

$expdp ananda/abc123 tables=CASES directory=DPDATA1
　　 dumpfile=expCASES_%U.dmp parallel=4 job_name=Cases_Export

include/exclude 例子：
include=table:"in('DB','TS')"
或者 include=table:"like '%E%'"
或者 include=function,package,procedure,table:"='EMP'"
或者 exclude=SEQUENCE,TABLE:"IN ('EMP','DEPT')"

2.Data Pump 導入  expdp

1) 從expdp中獲取數據源  exp.dmp
2)複製某個數據庫中的一個schema到另外一個數據庫中。
3)  在同一個數據庫中把一個schema中全部的對象複製到另外一個schema中。

例子：

1)impdp  的數據源是expdp 導出來的DMP文件

impdp ananda/abc123 directory=dpdata1 dumpfile=expCASES.dmp job_name=cases_import

2) 複製某個數據庫中的一個schema到另外一個數據庫中。
--1.newwork_link 爲目標數據庫創建的database_link，
( 用戶test 須要 grant exp_full_database to TEST; )
create public database link TOLINK
connect to TEST identified by oracle
using '(DESCRIPTION =  
  (ADDRESS_LIST =
    (ADDRESS = (PROTOCOL = TCP)(HOST = 10.0.20.199)(PORT = 1521))
  )
  (CONNECT_DATA =
    (SERVICE_NAME = orcl)
  )
)';

--2.impdp在目標數據庫服務器上執行 只能低版本向高版本 imp
impdp network_link=TOLINK schemas=test remap_schema=test:link2

3) 在同一個數據庫中把一個schema中全部的對象複製到另外一個schema中。

--1. 建立鏈接本身的 database link:

create public database link system_self connect to system identified by "system" using 'orcl';

數據庫連接已建立。

--2. 複製hr schema到 test schema:

impdp system/system network_link=system_self schemas=hr remap_schema=hr:test