背景

公司之前部门拆分,但一些服务并没有拆分清楚。其中一个老服务,两个部门都在用,现在为了避免互相影响,决定克隆该服务。克隆就要克隆全套,当然也包括数据库,我们这个老服务,用的oracle,所以,就涉及到从旧的oracle中导出数据,然后再导入到另一套新的oracle实例中。

届时在线上肯定是要物理隔离的,就是oracle要建在各自的服务器上,服务器间网络隔离;但我现在只是在开发环境验证拆分后功能是否正常,所以偷了个懒,没有新建实例,只是新建了个用户,进行逻辑隔离。

下午简单弄了下,踩了几个小坑,记录下来备忘。

导出步骤

schema、用户

一个oracle实例下,可以有多个用户,用户间逻辑隔离。用户和schema是什么关系呢?可以看我在dbeaver中建schema时候的弹框,直接就说创建schema等同于创建用户:

创建用户的时候,默认就会创建一个同名的schema。像表这种东西,不会直接和用户挂钩,而是挂在某个schema下,简单而言,schema相当于是用户和表、索引这些object间的一个中间层。具体可以看看这篇文章:

https://www.modb.pro/db/508147

要导出的目标

我这边就是要把如下左侧这个HX_PLAT_NEW这个schema中的所有数据导出,然后再导入到一个新的schema中(做逻辑隔离)。其实本来想做物理隔离,重新搭个oracle实例,感觉有点繁琐,先偷个懒吧。

导出的话,我先是看了下dbeaver,发现好像没有这块功能,于是在网上找,发现有两种方式:

  • expdp/impdp命令,其优势是速度快,但是稍微复杂一点;

  • exp/imp命令,速度慢,适用于数据量较小的情况,使用上简单一些。

详细可以参考:https://mp.weixin.qq.com/s/voGgQseZQCp30J6Rx-vNcQ

我这边表比较多,使用的是expdp/impdp方式。

导出过程遇到的错误

首先是找运维拿到了开发机器的ssh密码,然后利用netstat -nltp根据端口找进程,根据进程找到数据库cwd目录。

找到后,在机器上执行expdp -h,也提示没有帮助文档,只能去网上找,改了改如下:

expdp \'sys/1234 as sysdba\' schemas=hx_plat_new DIRECTORY=hx_plat_new_dump DUMPFILE=hx_plat_new.dmp

这里大概就是使用sys这个用户(密码:1234)作为sysdba身份登录,要导出的schema是hx_plat_new,导出后的文件名是hx_plat_new.dmp,文件放到哪里呢,由DIRECTORY这个参数指定(我自己在当前目录下建了个hx_plat_new_dump这个目录)

结果一执行,说ORACLE_HOME环境变量不存在,设置:

vim /etc/profile
export ORACLE_HOME=/u01/app/oracle/product/11.2.0/dbhome_1
source /etc/profile

再一执行,说ORACLE_SID这个环境变量找不到,虽然几年前搞过一阵oracle,现在我都不记得这玩意是啥,怎么设置了。

网上找到个sql查sid:

SELECT sys_context('USERENV', 'DB_NAME') AS ORACLE_SID FROM dual;
或者
SELECT sys_context('userenv','instance_name') FROM dual; https://stackoverflow.com/questions/6288122/checking-oracle-sid-and-database-name

接着设置环境变量:

export ORACLE_SID=orcl

再执行,说目录不存在,查了下,原来directory后面不是乱写的,目录需要先创建,这里再引用。我这边是直接查了下现在有哪些可以用的目录:

SELECT directory_name, directory_path FROM dba_directories

所以,这边把目录改成了第四个(随便选一个),或者自己也可以自己新建,建完还要给用户授权:

# 创建文件夹
create directory 文件夹名称 as '路径,基于系统';
# 将文件夹读写权限给被授权用户
grant read,write on directory 文件夹名称 to 被授权用户;

最终的命令是:

expdp \'sys/1234QWER as sysdba\' schemas=hx_plat_new DIRECTORY=DATA_PUMP_DIR DUMPFILE=hx_plat_new.dmp

然后在/u01/app/oracle/admin/orcl/dpdump/hx_plat_new.dmp 下就生成文件了。

导入步骤

建立新的schema

先是在dbeaver上建了个schema叫:hx_plat_split_test。

然后构造好了导入的命令:

impdp \'sys/oracle as sysdba\'  DIRECTORY=DATA_PUMP_DIR DUMPFILE=hx_plat_new.dmp  schemas=HX_PLAT_SPLIT_TEST

结构一直报错说schema:HX_PLAT_SPLIT_TEST找不到:

后边比较了下这个在dbeaver中建的用户和其他用户,感觉有点不一样:

于是把dbeaver建出来的删了,在sqlplus中创建。

SQL> CREATE USER HX_PLAT_SPLIT_TEST IDENTIFIED BY "1qazxxxx";

User created.

建用户的过程中,当时也报错,后来发现是说,密码如果是数字开头,必须用双引号。

参考:https://stackoverflow.com/questions/36612365/oracle-sql-plus-error-ora-00922-missing-or-invalid-option-when-creating-user

导入

新建用户后执行,还是报相同错误,后来以为是权限问题导致,准备对比下这个用户是不是权限和其他人不一样。网上看了几篇讲权限的文章,发现挺复杂,于是先不深究,找了个sql先执行下授权:

GRANT IMP_FULL_DATABASE TO HX_PLAT_SPLIT_TEST;

结果还是没效果。后面网上查了下,发现有个文章很像我的问题:

https://blog.csdn.net/lxpaopao/article/details/114930924

通过以下命令导入数据到oracle数据库,报"ORA-39002: 操作无效","ORA-39165: 未找到方案" 错误

impdp tms/tms123@orcl schema=tms directory=dump_dir dumpfile=ZBTMS2021031701.DMP

原因是通过expdp导出的用户,与需要导入的用户名称不一致

意思就是,导出和导入的用户不一样会有这个问题,于是照着改了改。

impdp \'sys/oracle as sysdba\' remap_schema=HX_PLAT_NEW:HX_PLAT_SPLIT_TEST remap_tablespace=HX_PLAT_NEW:HX_PLAT_SPLIT_TEST DIRECTORY=DATA_PUMP_DIR DUMPFILE=hx_plat_new.dmp schemas=HX_PLAT_SPLIT_TEST

发现还是报错,后面去掉了最后的schemas=HX_PLAT_SPLIT_TEST

impdp \'sys/oracle as sysdba\' remap_schema=HX_PLAT_NEW:HX_PLAT_SPLIT_TEST remap_tablespace=HX_PLAT_NEW:HX_PLAT_SPLIT_TEST DIRECTORY=DATA_PUMP_DIR DUMPFILE=hx_plat_new.dmp

嗯,这下ok了。

总结

oracle这个还是过于复杂了,几年前也是小公司,dba出差了,项目需要,被迫搞了一阵,太痛苦了,几年下来,又全忘了。

参考资料

这里记录下后续发现的一些不错的参考资料:

官方,包含命令的各个选项的意思(11g版本的):

https://docs.oracle.com/cd/E11882_01/server.112/e22490/dp_export.htm#SUTIL824

https://docs.oracle.com/cd/E11882_01/server.112/e22490/dp_import.htm#SUTIL300

https://mp.weixin.qq.com/s/voGgQseZQCp30J6Rx-vNcQ

https://mp.weixin.qq.com/s/m7GrQnJ-QalTf1lluUO4Gg

https://mp.weixin.qq.com/s/IvzXv4CKAQELGKcH3tbW4Q

如果没有服务器登录权限,可以采用第三方工具如TOAD:

https://mp.weixin.qq.com/s/hFmH-k6Bs65xlswU50bhfg

oracle导入导出某个schema数据的更多相关文章

  1. ORACLE导入导出数据dmp

    imp testwms3/isc@TESTGMMC FILE=C:\ZKGL_201407012334.dmp ignore=y fromuser=GMMCZKGL touser=testwms ta ...

  2. Oracle导入导出之dmp

    Oracle导入导出有两种方式,分别是imp/exp与impdp/expdp. 1.imp/exp exp scott/tiger file=d:\test.dmp log=d:\test.log o ...

  3. oracle导入导出 dmp文件

    oracle导入导出 dmp文件: 打开cmd窗口,在cmd窗口下,按照个人需要输入以下对应的命令: 1.imp 用户名/密码@网络服务名 file=XXX.dmp fromuser=XXX tous ...

  4. NodeJs之EXCEL文件导入导出MongoDB数据库数据

    NodeJs之EXCEL文件导入导出MongoDB数据库数据 一,介绍与需求 1.1,介绍 (1),node-xlsx : 基于Node.js解析excel文件数据及生成excel文件. (2),ex ...

  5. oracle导入导出功能

    1.普通版:oracle导入导出功能:导出exp 用户名/密码@SID file=f:\xx.dmp owner=用户名 导入imp 用户名/密码@SID full=y file=f:\xx.dmp ...

  6. mysql 导入导出数据库、数据表的方法

    mysql 导入导出数据库.数据表的方法. Linux操作系统中,均在控制台下操作.1,导入数据库:前提:数据库和数据表要存在(已经被创建)(1)将数据表 test_user.sql 导入到test ...

  7. oracle导入导出操作

    1,获取oracle导入导出帮助: imp help=y 2,导出命令 exp 用户名/密码@数据库实例 file=文件路径名 如: exp sys/password@orcl file=d:\dat ...

  8. oracle 导入导出数据

    Oracle数据导入导出imp/exp就相当于oracle数据还原与备份.exp命令可以把数据从远程数据库服务器导出到本地的dmp文件,imp命令可以把dmp文件从本地导入到远处的数据库服务器中.利用 ...

  9. Oracle导入导出

    Oracle 10g 已经引入了数据泵(点击Data Dump)技术,这项技术和之前的exp/imp有哪些好处呢,简单的来说就是恢复和备份速度非常快: 在说明数据泵的使用方法之前,我们先来了解二者的区 ...

  10. ORACLE导入导出操作篇

    1. DIRECTORY 指定转储文件和日志文件所在的目录DIRECTORY=directory_objectDirectory_object用于指定目录对象名称.需要注意,目录对象是使用CREATE ...

随机推荐

  1. web自动化04-css定位

    css元素定位 1. 是什么? 用来描述html元素的显示样式 选择器是一种模式,用于选择需要添加样式的元素   selenium中推荐使用css定位,比XPath定位要快    2.如何定位?   ...

  2. 在.net项目中添加Husky.Net提交验证

    参考:C# 项目添加 husky - jesn - 博客园 (cnblogs.com) 官方文档:Getting Started | Husky.Net (alirezanet.github.io) ...

  3. Java如何实现去重?这是在炫技吗?

    大家好,我3y啊.由于去重逻辑重构了几次,好多股东直呼看不懂,于是我今天再安排一波对代码的解析吧.austin支持两种去重的类型:N分钟相同内容达到N次去重和一天内N次相同渠道频次去重. Java开源 ...

  4. 使用poi-tl导出word文件的几个技巧

    1.前言   Poi-tl提供了基于word模板文件导出word文件的功能.文档地址:http://deepoove.com/poi-tl/.   用下来,总体感觉还是很方便的.但使用过程,有几个细节 ...

  5. MySQL8新特性窗口函数详解

    本文博主给大家详细讲解一波 MySQL8 的新特性:窗口函数,相信大伙看完一定能有所收获. 本文提供的 sql 示例都是基于 MySQL8,由博主亲自执行确保可用 博主github地址:http:// ...

  6. 洛谷 P5540 [BalkanOI2011] timeismoney | 最小乘积生成树

    题意 给一个无向图,边有两个权 \(a\) 和 \(b\),定义一个生成树的权值是 \(\left(\sum\limits_{e\in T}a_e\right)\left(\sum\limits_{e ...

  7. Spring 中的 Bean

    前言 欢迎来到本篇文章,鸽了好久了,今天继续写下 Spring 的内容:Spring 中 Bean 的基本概念.基本写法和 3 种实例化 Bean 的方式等. 什么是 Bean? 我们回顾下,什么是 ...

  8. 2023-06-24:给你一根长度为 n 的绳子, 请把绳子剪成整数长度的 m 段, m、n都是整数,n > 1并且m > 1, 每段绳子的长度记为 k[0],k[1]...k[m - 1]。 请问

    2023-06-24:给你一根长度为 n 的绳子, 请把绳子剪成整数长度的 m 段, m.n都是整数,n > 1并且m > 1, 每段绳子的长度记为 k[0],k[1]...k[m - 1 ...

  9. 看懂java序列化,这篇就够了

    前言 相信大家日常开发中,经常看到 Java 对象 "implements Serializable".那么,它到底有什么用呢?本文带你全方位的解读序列化与反序列化这一块知识点. ...

  10. .NET 7 新特性全面解析

    在 2021 年 11 月 8 日发布的 .NET 6 当前已经广泛使用.微软团队已经开始着手为.NET 7制定计划和新特性.本文将为您全面解析.NET 7 的新特性,并提供源代码示例. 1. 更好的 ...