【数据库迁移系列】从Oracle迁移到openGauss实战分享

分类：Oracle作者：Gauss松鼠会

之前的迁移系列中我们介绍了Mysql到openGauss的迁移方法，本篇介绍使用Ora2og工具从Oracle到openGauss数据库的迁移。

文章目录

简介

ora2pg 可以将 Oracle 或者 MySQL 数据库迁移到 PostgreSQL，应用场景小到 Oracle 数据库的反向工程，大到大型企业数据库迁移，或者简单地将一些 Oracle 数据复制到 PostgreSQL 数据库。Ora2Pg 由一个 Perl 脚本（ora2pg）以及一个 Perl 模块（Ora2Pg.pm）组成，唯一需要做的事情就是修改它的配置文件 ora2pg.conf，设置连接 Oracle 数据库的 DSN 和一个可选的模式名称。完成之后，只需要设置导出的类型：TABLE（包括约束）、VIEW、TABLESPACE、SEQUENCE、INDEXES、TRIGGER、FUNCTION、PROCEDURE、PACKAGE等等。

ora2og是一个将Oracle数据库迁移至openGauss的工具，ora2og初始代码源自ora2pg release v21.1，在原基础上适配了openGauss的相关内容。

在这里插入图片描述

特点：

  • 支持导出数据库绝大多数对象类型，包括表、视图、序列、索引、外键、约束、函数、存储过程等。
  • 提供PL/SQL到PL/PGSQL语法的自动转换，一定程度避免了人工修正。
  • 可生成迁移报告，包括迁移难度评估、人天估算。
  • 可选对导出数据进行压缩，节约磁盘开销。
  • 配置选项丰富，可自定义迁移行为。

迁移前准备

环境

本篇使用环境：
Oracle ： 华为云服务器2核4G + CentoOS 7.6 +Oracle 11.2
openGauss：华为云服务器2核4G + CentoOS 7.6 +openGauss 3.1.0极简版
两台节点网络互通
迁移前准备
Ora2og工具既可以安装在Oracle服务器上，也可以安装在openGauss服务器上。本篇中将工具部署在Oracle服务器上。
注意，如果安装在openGauss上时，需要在服务器上安装Oracle客户端。

软件安装

Ora2Pg语言为perl，故需安装所需perl模块，版本5.8及以上。

root用户下操作，安装DBI、JSON、DBD:Pg、DBD:Oracle，Ora2Pg依赖这些软件去连接数据库。

yum install -y perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker
yum install perl-CPAN
perl -MCPAN -e 'install DBI'
perl -MCPAN -e 'install JSON'
perl -MCPAN -e 'install DBD::Pg'

设置root 用户的环境变量，可以写入/etc/profile，然后source生效。根据实际情况修改。

export ORACLE_HOME=/u01/app/oracle/product/11.2.0/
export LD_LIBRARY_PATH=/u01/app/oracle/product/11.2.0/lib

使用 perl -MCPAN -e ‘install DBD::Oracle’ 安装报错了，换了另一种自己编译的方式。

[root@oraclehost ora2pg-master]# perl -MCPAN -e shell
......
cpan[1]> get DBD::Oracle
........
Checksum for /root/.cpan/sources/authors/id/Z/ZA/ZARQUON/DBD-Oracle-1.83.tar.gz ok
......
cpan[2]> quit

[root@oraclehost ora2pg-master]# cd /root/.cpan/sources/authors/id/Z/ZA/ZARQUON/
[root@oraclehost ZARQUON]# tar -zxvf DBD-Oracle-1.83.tar.gz
[root@oraclehost ZARQUON]# cd DBD-Oracle-1.83
[root@oraclehost DBD-Oracle-1.83]# perl Makefile.PL
[root@oraclehost DBD-Oracle-1.83]# make && make install

在这里插入图片描述

ora2og工具安装

安装Ora2Pg <you_install_dir>为目标安装路径，<source_code_dir>为下载的代码路径。 如果服务器上没有git的话，可以从网站把源码包下载再解压。

mkdir -p /opt/software/ora2pg
git clone https://toscode.gitee.com/opengauss/openGauss-tools-ora2og.git

进到代码目录下
perl Makefile.PL PREFIX=<your_install_dir>
make && make install
设置环境变量，查看是否安装成功
export PERL5LIB=<source_code_dir>/lib
export PATH=$PATH:<your_install_dir>/usr/local/bin
需要确保bin路径下有ora2pg这个文件，否则命令找不到。
执行ora2pg --help

在这里插入图片描述

创建迁移项目

ora2pg --init_project oramig

创建迁移项目后会在当前目录下生成oramig目录模板，如下所示。其中主要包含两个脚本export_schema.sh和import_all.sh，后续导出和导入即使用这两个脚本。schema和sources目录存放各对象的DDL语句，区别在于schema存放PL/SQL语法转化为PL/PGSQL后的语句， sources目录存放转化前PL/SQL的语句，data目录存放表数据文件，config目录包含配置文件ora2pg.conf，reports目录存放迁移报告。

在这里插入图片描述

建用户和表
Oracle建个表，用来做测试数据

 create table customerchat.test(name char(10));
 insert into customerchat.test values('opengauss');
 create table customerchat.xxx(name char(20));
 insert into customerchat.xxx values('yy');

openGauss侧新建数据库mydb和用户tuser,迁移时会用到。

mydb=#create database mydb;
mydb=# CREATE USER tuser WITH PASSWORD '自己定义';
mydb=# GRANT ALL PRIVILEGES TO tuser;
mydb=# alter database mydb owner to tuser;

配置ora2pg.conf

拷贝配置文件，注意路径，后面执行sh的时候会找config/ora2pg.conf。

cp <your_install_dir>/etc/ora2pg/ora2pg.conf.dist <source_code_dir>/config/ora2pg.conf

ORACLE相关参数：
ORACLE_HOME /u01/app/oracle/product/11.2.0/
ORACLE_DSN dbi:Oracle:host=oracleIP;sid=orcl;port=1521
ORACLE_USER customerchat // 这里用的oracle普通用户和密码
ORACLE_PWD XXXXX
SCHEMA customerchat //一般和用户名一样
openGauss相关参数：
PG_DSN dbi:Pg:dbname=mydb;host=localhost;port=5432
PG_USER tuser
PG_PWD 自己定义的密码
工具自身参数：
DATA_LIMIT 默认是10000，如果oracle服务器内存较小，比如4G以下，可以修改为2500或5000,否则可能会报内存不足。
更多更详细的配置项说明，可查看ora2pg.darold.net官网.

测试一下配置：
执行如下命令会返回连接的Oracle版本号。

 ora2pg -t SHOW_VERSION -c config/ora2pg.conf

在这里插入图片描述

测试迁移

修改迁移工具oramig目录下export_schema.sh中导出类型EXPORT_TYPE和SOURCE_TYPE，本次迁移导出TABLE。

导出

在oramig目录下执行

sh export_schema.sh

在这里插入图片描述

执行完成后 在schema/tables生成 table.sql ，里面是建表脚本。

在这里插入图片描述

reports/目录下生成的report报告report.html

在这里插入图片描述

导入

还是在oramig目录下执行导入
为了使用openGauss命令行工具gsql，需要将数据库的bin和lib加在操作系统的环境变量PATH和LD_LIBRARY_PATH中。可以通过直接root用户执行gsql测试。
3. 将import_all.sh里的psql修改为gsql。

执行导入脚本，表示使用用户tuser登录openGauss中mydb的数据库，ip和端口，-f选项表示跳过用户和数据库是否需要创建的检查。

sh import_all.sh -d mydb -o tuser -h openGaussIP -p 5432 -f

在这里插入图片描述

执行成功。

可以看到表和数据都已经迁移过来。

在这里插入图片描述

Ora2Pg不足

Ora2Pg对PL/SQL和PL/PGSQL的语法转换处理采用正则表达式和文本替换的方式，先天设计不足，很难覆盖所有的语法，目前仅支持部分转换。因此，Ora2Pg可以满足SQL简单的应用迁移，对于复杂的语法，并不能完全保证转换的正确性，需要对生成的SQL语句进行核对，必要时需要人工修正。

FAQ

1.报错：Path to pg_config? /opt/software/openGauss/bin/pg_config
/opt/software/openGauss/bin/pg_config: error while loading shared libraries: libssl.so.1.1: cannot open shared object file: No such file or directory
环境自带的是1.0.2，得升级libssl.so。

[root@oraclehost ~]# openssl version -a
OpenSSL 1.0.2k-fips  26 Jan 2017
yum remove openssl

获取新的版本并安装
wget https://www.openssl.org/source/openssl-1.1.1c.tar.gz
tar -zxvf openssl-1.1.1c.tar.gz
cd openssl-1.1.1c
./config --prefix=/usr/local/openssl   #如果此步骤报错,需要安装perl以及gcc包
make && make install

ln -s /usr/local/openssl/lib/libssl.so.1.1 /usr/lib64/libssl.so.1.1
ln -s /usr/local/openssl/lib/libcrypto.so.1.1 /usr/lib64/libcrypto.so.1.1
ln -s /usr/local/openssl/bin/openssl /usr/bin/openssl
ln -s /usr/local/openssl/include/openssl /usr/include/openssl
echo "/usr/local/openssl/lib" >> /etc/ld.so.conf
ldconfig -v

sudo  yum install postgresql-devel

再重新执行  perl -MCPAN -e 'install DBD::Pg'

2、perl 报错 Can’t locate JSON.pm in @INC

在这里插入图片描述

解决：

sudo perl -MCPAN -e ‘install JSON’

3、如何查看Oracle 的SID ？

在这里插入图片描述

SQL> select instance_name from V$instance;

4、执行 ora2pg -t SHOW_VERSION -c ora2pg.conf 报错
FATAL: -1 … ERROR OCIEnvNlsCreate. Check ORACLE_HOME (Linux) env var or PATH (Windows) and or NLS settings,permissions,etc.
Aborting export…
Export $ORACLE_HOME了半天，发现原来是 ora2pg.conf 里面配置的ORACLE_HOME 不对

5、执行ora2pg -t SHOW_VERSION -c ora2pg.conf报错
FATAL: 12505 … ORA-12505: TNS:listener does not currently know of SID given in connect descriptor (DBD ERROR: OCIServerAttach)
Aborting export…

解决办法 SID配置有问题 或者 /etc/hosts有问题。参考下面连接解决
https://www.shuzhiduo.com/A/6pdDw0bl5w/

6、执行 ora2pg -t SHOW_VERSION -c config/ora2pg.conf 报错
install_driver(Oracle) failed: Can’t load ‘/usr/local/lib64/perl5/auto/DBD/Oracle/Oracle.so’ for module DBD::Oracle: libclntsh.so.11.1: cannot open shared object file: No such file or directory at /usr/lib64/perl5/DynaLoader.pm line 190.
解决办法

export LD_LIBRARY_PATH=$ORACLE_HOME/lib

7、执行 ora2pg -t SHOW_VERSION -c ora2pg.conf报错
FATAL: ORA-08178: illegal SERIALIZABLE clause specified for user INTERNAL (DBD ERROR: OCIStmtExecute)
解决办法：
不要使用sys用户，使用普通oracle用户（没有可新建），然后修改 ora2pg.conf中的用户名和密码

8、执行sh import_all.sh -d mydb -o tuser -h IP -p 5432 -f 提示Out of memory,但是top显示还有1G多。
解决办法：
Opened ./config/ora2pg.conf and modfied set DATA_LIMIT 5000 or 2500 solved the issue.

9、报错：DBD::Pg::db do failed: ERROR: permission denied for relation xxx
解决办法：
需要给openGauss的角色赋权限

mydb=# grant all privileges to tuser;

10、报错：
DBI connect(‘dbname=mydb;host=openGaussIP;port=5432’,‘testuser’,…) failed: connection to server at “openGaussIP”,port 5432 failed: none of the server’s SASL authentication mechanisms are supported at /opt/software/ora2pg/lib
解决办法：
这个错是openGauss返回的。需要把openGauss的pg_hba.conf & postgres.conf再搞下。
修改 data/single_node/postgresql.conf 中password_encryption_type = 1 。
修改pg_hba.conf 中

在这里插入图片描述


然后重启openGauss：gs_ctl restart -D /opt/software/openGauss/data/single_node

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

c# json字符串转Oracle的insert into的小程序
文章浏览阅读773次，点赞6次，收藏9次。【代码】c# json字符串转Oracle的insert into的小程序。
PLSQL Developer远程连接Oracle报错提示：“ORA-12541：TNS：无监听程序”的解决方案及思路
文章浏览阅读8.7k次，点赞2次，收藏17次。此现象一般定位到远端的监听服务来找问题，在远端查看监听服务状态（具体看下面的解决方案会详细呈现），服务是否开启，另外查看监听端点概要是否存在host未指向到计算名的，如无直接进入监听配置文件listener.ora内添加指向即可。2、查看监听服务状态 lsnrctl status，右边为远端端点状态，未添加host指向到计算名；1、本地及远端安装好Oracle并配置好连接，Oracle服务和监听已启动；1、远程Oracle数据库：Oracle11g R2。或者进入下述服务手动重启。，再进行远程连接即可。_ora-12541:tns:无监听程序
将mysql的脚本转化为oracle的脚本攻略
文章浏览阅读2.8k次。mysql脚本转化为oracle脚本_mysql建表语句转oracle
cx_Oracle DatabaseError: DPI-1047: Cannot locate a 64-bit Oracle Client library XXX
文章浏览阅读2.2k次。cx_Oracle报错：cx_Oracle DatabaseError: DPI-1047: Cannot locate a 64-bit Oracle Client library_cx_oracle.databaseerror: dpi-1047: cannot locate a 64-bit oracle client libr
【Oracle】玩转Oracle数据库（二）：体系结构、存储结构与各类参数
文章浏览阅读1.1k次，点赞38次，收藏35次。本文深入探讨了Oracle数据库的核心要素，包括体系结构、存储结构以及各类参数。通过解析Oracle数据库的体系结构，读者可以深入了解其内部组成和工作原理。存储结构部分介绍了数据在Oracle中的存储方式，从表空间到数据文件的层层逻辑。最后，我们深入探讨了Oracle数据库中各类参数的作用和配置方法，帮助读者更好地理解和优化数据库性能。本文旨在帮助读者全面理解Oracle数据库的运作机制，为其在实践中的应用提供基础和指导。
oracle自动收集统计信息
文章浏览阅读1.5k次。默认自动收集统计信息的时间为晚上10点（周一到周五，4个小时），早上6点（周六，周日，20个小时）由于平时默认每天只收集4小时，时间有点短了，改成每天可收集8小时。oracle 18c中默认是打开的。查看当前自动收集统计信息的时间。_oracle自动收集统计信息
oracle 大页配置详细介绍
文章浏览阅读929次，点赞18次，收藏20次。只有assm（Automatic Shared Memory Management）模式可以使用大页，需要关闭amm（Memory Manager Process）HugePages_Free: 306 （空闲306页，已使用306-306=0页）防止oracle使用的内存交换，所以设置的大小与oracle配置的sga、pga相关。HugePages_Rsvd: 0 （操作系统承诺给oracle预留的页数）HugePages_Total: 306 （总共306页）_oracle11g 大页
Oracle第十五节---Oracle中的日志
文章浏览阅读801次。例如：10046：0，1，4，8，12。默认redo日志有三个，大小为50M，循环覆盖使用。redo log再覆盖之前，会被归档，形成归档日志。答：不同事件，不同级别。trace的不同级别？_oracle 日志
【MySQL基础|第一篇】——谈谈SQL中的DDL语句
文章浏览阅读4.2k次，点赞84次，收藏77次。主要讲解MySQL中SQL的DDL语句，其中包括对数据库和表的一系列操作。_sql ddl 新增字段 mysql
ORACLE物化视图materialized view
文章浏览阅读1.1k次。ON DEMAND：仅在该物化视图“需要”被刷新了，才进行刷新(REFRESH)，即更新物化视图，以保证和基表数据的一致性；ON COMMIT：一旦基表有了COMMIT，即事务提交，则立刻刷新，立刻更新物化视图，使得数据和基表一致。Method =>'C',物化视图有三种刷新方式：COMPLETE、FAST和FORCE。物化视图会占用空间，一半可用于大量数据查询时，减缓主表的查询压力使用。例如创建一个物化视图，让对接单位查询。_oracle物化视图定时刷新
Oracle NoSQL Database 的集成与开发者工具
文章浏览阅读713次，点赞21次，收藏18次。1.背景介绍在当今的大数据时代，数据量越来越大，传统的关系型数据库已经无法满足业务需求。因此，NoSQL数据库技术迅速崛起，成为企业和开发者的首选。Oracle NoSQL Database是Oracle公司推出的一款分布式NoSQL数据库产品，具有高性能、高可用性和易于扩展等特点。在本文中，我们将深入了解Oracle NoSQL Database的集成与开发者工具，帮助您更好地掌握这款产品的...
Oracle-如何判断字符串包含中文字符串（汉字），删除中文内容及保留中文内容
文章浏览阅读2.5k次，点赞2次，收藏4次。今天遇见一个问题需要将字段中包含中文字符串的筛选出来。_oracle查询包含中文字符
arcmap 在oracle删除表重新创建提示表名存在解决放啊
文章浏览阅读802次。arcmap 在oracle删除表重新创建提示表名存在解决放啊
Oracle连接数据库提示 ORA-12638:身份证明检索失败
文章浏览阅读4.3k次，点赞2次，收藏4次。Oracle连接数据库提示 ORA-12638:身份证明检索失败_ora-12638
2023年 Linux JDK1.8安装（详细教程）
文章浏览阅读3.4k次，点赞6次，收藏25次。etc/profile是一个全局配置文件，所有用户登录都会使用该文件构建用户环境。与windows配置环境变量是一个道理。选择Linux系统，找到适合自己系统的安装包，我的是CentOS 8 x64。接下来需要登陆Oracle账户才能下载，无账户的可以自己注册一个。Linux中export 命令用于设置或显示环境变量。模式，利用上下键到文档最后，添加以下代码。出现如图所示版本号字样，则说明安装成功。点击下载，勾选1，点击2。记住完整路径用于后面配置。找到Java并点击进去。往下翻，找到Java8。_linux安装jdk1.8
JDK安装教程详解
文章浏览阅读2.4w次，点赞26次，收藏109次。JDK 是的简称，也就是 Java 开发工具包。JDK 是整个 Java 的核心，其中JDK包含了 Java 运行环境（Java Runtime Envirnment，简称 JRE），Java 工具（比如 javac、java、javap 等等），以及 Java 基础类库（比如 rt.jar）。最主流的 JDK 是Oracle公司发布的 JDK，除了 Oracle JDK（商业化，更稳定）之外，还有很多公司和组织开发了属于自己的 JDK，比较有名的有IBM JDK（更适合 IBM） 和OpenJDK。_jdk安装教程
已解决java.sql.SQLNonTransientConnectionException:Could not create connection to database server异常的正确解决
文章浏览阅读7.5w次。出现 “java.sql.SQLNonTransientConnectionException:Could not create connection to database server” 的错误通常是由于无法连接到数据库服务器引起的。_java.sql.sqlnontransientconnectionexception: could not create connection to
ClickHouse中创建用户、数据库并进行权限分配
文章浏览阅读849次，点赞7次，收藏10次。在ClickHouse中创建用户、数据库并进行权限分配是一个重要的管理任务，它涉及到安全性和访问控制。下面是一个基本的指南来帮助你完成这些操作：1. 创建数据库首先，需要创建一个数据库。使用以下命令：CREATE DATABASE IF NOT EXISTS your_database_name;将 your_database_name 替换为你想要的数据库名。2. 创建用户接下来，创建一个新用户。使用以下命令：CREATE USER your_username IDENTIFIED WIT_在clickhouse中如何创建用户 赋权
【Oracle】玩转Oracle数据库（一）：装上去，飞起来！
文章浏览阅读1.2k次，点赞53次，收藏39次。本文是一篇关于Oracle数据库安装和使用的博文摘要。作者以轻松幽默的笔调介绍了自己在实验中掌握的Oracle数据库基本操作，包括使用组件查看命令、配置数据库监听器等。作者也分享了在实验中遇到的一些有趣问题，如SQL语句缺少分号导致的意外错误。此外，作者还强调了登录sys用户和启动实例加载数据库的注意事项，并鼓励读者面对挑战时保持乐观，不断提升自己的能力。整体风格风趣严谨，引人入胜。
人大金仓数据库KingbaseES 兼容Oracle包dbms_xmlgen的SETSKIPROWS过程使用介绍
文章浏览阅读820次，点赞17次，收藏16次。KingbaseES、xml、dbms_xmlgen、SETSKIPROWS、人大金仓、KingbaseES兼容Oracle包dbms_xmlgen的功能是通过SQL查询将关系表中数据转化为XML文档。转化方式一共有两种：（1）通过查询字符串直接转化。（2）通过上下文句柄转化。对于通过查询字符串直接转化的方式，无法跳过若干行进行查询，只能直接将表格中的所有数据转化为XML文档。
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot