Oracle 11G 数据库迁移【expdp/impdp】

转自：http://www.th7.cn/db/Oracle/201802/263773.shtml

0x01 环境 

A 机器，操作系统 CentOS7.3，Oracle版本：11G，IP地址：192.168.1.11B 机器，操作系统 CentOS7.3，Oracle版本：11G，IP地址：192.168.1.12

将数据库从A机器迁移到B机器A机器 Oracle 监听SID：orcl, 帐号：CINRAD，密码：*， 表空间名称：CINRAD_DATA, 表空间文件大小：共10个文件，每个文件初始大小10G，可自动增长，增长幅度100M，最大大小为30G，表空间中的数据约为120G左右

B机器 Oracle 监听SID：orcl

0x02 迁移 
1. 使用dba登录A机器的Oracle数据库 
sqlplus / as sysdba2. 创建数据库导出目录 

目录可自定义。若系统中无该目录，则手动创建，并赋予777权限

SQL > create directory dumpdir as '/data/oracle/dump';3. 赋予Oracle用户对于导出目录的读写权限 
SQL > grant write,read on directory dumpdir to CINRAD;4. 使用expdp导出数据 

进入Linux命令行，登录Oracle帐号，使用导出工具expdp对CINRAD用户下的所有数据导出【可使用并行参数paraller进行多文件同时导出】单文件导出：

expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad.dump

多文件并行导出：

expdp CINRAD/cinrad@orcl directory=dumpdir dumpfile=cinrad_20180204_%U.dump filesize=500M paraller=5
// filesize=500M单文件最大500M
// paraller = 5 并行数为5

这里，我导出的是单文件，下面，以单文件导出为例，继续进行。

5. 传输导出文件 

将A机器导到的dump文件传输到B机器/data/oracle/dump目录下

scp /data/oracle/dump/cinrad.dump root@192.168.1.12:/data/oracle/dump/cinrad.dump
scp /data/oracle/dump/export.log root@192.168.1.12:/data/oracle/dump/export.log

也可以将两个导出文件压缩后一起传输

6. 使用dba登录B机器的Oracle数据库 
sqlplus / as sysdba 7. 创建与A机器相同的数据表空间 
create tablespace CINRAD_DATA datafile '/share/database/oracle/cinrad01.dbf' size 10G autoextend on next 100Mmaxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad02.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad03.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad04.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad05.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad06.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad07.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad08.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad09.dbf' size 10G autoextend on next 100M maxsize 30G;
alter tablespace CINRAD_DATA add datafile '/share/database/oracle/cinrad10.dbf' size 10G autoextend on next 100M maxsize 30G;

创建数据表空间，并向该表空间中添加数据文件

8. 创建用户，并指定默认表空间 

创建与A机器相同的用户，表将表空间CINRAD_DATA指定给该用户

SQL > CREATE USER CINRAD IDENTIFIED BY cinrad DEFAULT TABLESPACE CINRAD_DATA
// IDENTIFIED BY cinrad 此cinrad 为密码，可更换
// DEFAULT TABLESPACE CINRAD_DATACINRAD_DATA 为指定的默认表空间9. 授权 

B机器的相应的Oracle用户创建完毕之后，需要给该用户相应的数据库操作权限，与A相同或者直接赋予所有权限

SQL > grant all privileges to CINRAD
// CINRAD 为用户名10. 创建导入目录 

在B机器上创建导入目录 ，并授予该目录777 权限 ，在Oracle中创建该目录

SQL > create directory dumpdir as '/data/oracle/dump';11. 授予Oracle用户导入目录读写权限 
SQL > grant write,read on directory dumpdir to CINRAD;12. 使用impdp导入数据 

进入Linux命令行，登录Oracle帐号，使用导出工具impdp对数据进行导入

impdp system/oracle@orcl directory=dumpdir dumpfile=cinrad.dump parallel=10

此次导出从晚上22点开始，次日01:13:58结束，耗时过长，需要优化。 主要针对索引导入的效率， 导入日志见附件。导入选项：

table_exists_action ： skip 是如果已存在表，则跳过并处理下一个对象；append是为表增加数据；truncate是截断表，然后为其增加新数据；replace是删除已存在表，重新建表并追加数据 13. 检查迁移数据 
0x03 错误 

若没有遇到报错，则可忽略，进行0x04的优化

1. 使用expdp/impdp工具时报错 
1. Oracle软件与数据库不匹配错误： 

问题描述：

ORA-31626: job does not exist 
ORA-31637: cannot create job SYS_EXPORT_SCHEMA_01 for user SYSTEM 
ORA-06512: at "SYS.DBMS_SYS_ERROR", line 95 
ORA-00942:table or view does not exist

解决方案：

使用DBA用户登录Oracle数据库 
执行以下代码SQL>@?/rdbms/admin/catalog.sql
SQL>@?/rdbms/admin/catproc.sql 
[后续此库出现问题：EXP-00056: ORACLE error 932 encountered] ， 可继续执行SQL> @?/rdbms/admin/catmetx.sql 
SQL> @?/rdbms/admin/utlrp.sql2. 重启Oracle数据库报错 
1. 数据库无法正常关闭，并锁定内存问题 

问题描述：在数据库中执行shutdown immediate关闭数据库，报错：

ORA-27102: out of memory
Linux Error: 12: Cannot allocate memory

查看Linux中虚拟内存/dev/shm的占用情况 [命令：df -hT]，发现占用在90%以上，内存已经被锁定无法释放

解决方案:

在Linux中执行 ps -ef | grep oracle ，查看oracle进行的pid 
使用 kill -9 {pid} 的方式将Oracle进程杀死 
使用DBA登录Oracle 
startup 启动数据库 3. 数据导入过程中报错 
1. DB_LINK创建失败，权限不足 

问题描述： 导入过程中，导入DB_LINK时提示，权限不足解决方案： 赋予该用户DBA的权限或所有权限即可

2. DB_LINKE 创建失败，缺失关键字 

问题描述：

失败的 sql 为:
CREATE DATABASE LINK "ASOM"CONNECT TO "ASOM" IDENTIFIED BY VALUES '05535CD93437C21A745CE9EB530617B269'AUTHENTICATED BY "ASOM" IDENTIFIED BY VALUES '0506C0E222927A938BF9F44DCB31C2038D'USING '10.36.6.55:1521/orcl'
ORA-00905: 缺失关键字

解决方案：待解决，暂时导入完成后手动创建。

3. 用户不存在 

问题描述：

处理对象类型 SCHEMA_EXPORT/TABLE/GRANT/OWNER_GRANT/OBJECT_GRANT
ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:
ORA-01917: 用户或角色 'CINRAD_META' 不存在
失败的 sql 为:
GRANT SELECT ON "CINRAD"."STA_RADAR" TO "CINRAD_META"
ORA-39083: 对象类型 OBJECT_GRANT 创建失败, 出现错误:
ORA-01917: 用户或角色 'CINRAD_META' 不存在
失败的 sql 为:
GRANT SELECT ON "CINRAD"."TEST_STA_RADAR" TO "CINRAD_META"

解决方案： 若该用户下的数据里有你想要导入的数据，则创建该用户重新导入，若没有你想导入的数据，则忽略即可。

4. 视图存在编译警告 

问题描述：

ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_DATA" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_SONDE_OBSERVE_DATA" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_FLASHLIGHT_OBSERV_DATA_HIS" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_STA_AWS_REG" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_AWS_OBSERVE_REG" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_EFF" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_OUTSIDE" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_UTILIZATION" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_PARTAKE" 已创建, 但带有编译警告
ORA-39082: 对象类型 VIEW:"CINRAD"."V_EVA_THUNDER_LOCATEMODE" 已创建, 但带有编译警告
ORA-39082: 对象类型 PACKAGE_BODY:"CINRAD"."GP_DISPATCHER" 已创建, 但带有编译警告

解决方案：使用PLSQL连接数据库，右击该视图，编辑，回车，即可解决。

0x04 优化 
1. Oracle内存优化 

假设服务器内存32G

1. 查看用于Oracle的虚拟内存[/dev/shm]大小, 执行命令 df -hT 

tmpfs tmpfs 16G 2.1G 14G 14% /dev/shm此内存一般为服务器物理内存的50%到80%， 若读写均占差不多的比重，则为50%【16G】左右，若写的比重更大，则适当增加虚拟内存的大小

2. 使用DBA登录数据库，查看Oracle内设置的内存大小情况 
SQL >show parameter mem;

查看memory_max_target 与 memory_target 的值， 该值必须小于等于服务器设置的虚拟内存【16G】的大小，并且大于SGA+PGA的内存大小。若memory_max_target 与 memory_targety 设置过小，则需要调整。

3. 修改Oracle的内存大小【memory_max_target与memory_targety 】以DBA登录Oracle数据库 
执行语句 ：SQL> shutdown immediate 关闭数据库 
执行语句 ：SQL> create pfile from spfile; 
编辑pfile文件: Linux 下执行 ， vim $ORACLE_HOME/dbs/initorcl.ora调整memory_max_target memory_target, 两个值都相同调整 .sga_target 的值调整 .pga_aggregate_target 的值调整原则：/dev/shm虚拟内存 >=【memory_max_target/memory_target】>= sga_target + pga_aggregate_target

若没有按照该原则调整，则会报以下错误 ：

ORA-00838: Specified value of MEMORY_TARGET is too small, needs to be at least 4016M ORA-00845: MEMORY_TARGET not supported on this system 
执行语句：SQL> startup ，启动数据库 2. 关闭归档模式查看归档模式是否开启，执行语句 ： SQL> select name, log_mode from v$database; 若返回为NOARCHIVELOG, 则归档模式已关闭。 
若归档模式开启，则执行语句：alter database noarchivelog; 若不生效，可重启数据库查看效果 3. 更改最大连接数 

将最大连接数调整为2000

查看processes和sessions参数SQL> show parameter processesSQL> show parameter sessions 
修改processesSQL> alter system set processes=2000 scope=spfile; 
修改sessionsSQL> alter system set sessions=2000 scope=spfile; 4. 关闭监听日志 

修改文件 $ORACLE_HOME/network/admin/listener.ora在文件顶部添加： LOGGING_LISTENER = OFF保存退出

重启lsnrctl: 执行命令

lsnrctl stop 
lsnrctl start