PostgreSQL--Oracle数据库迁移至PG数据库,在Navicat中

安装navicat, 

一、迁移表结构和表数据(源库Oracle、目标库PG、表:O_TO_PG)

1、表结构等迁移

1)、复制表结构

在Oracle数据库中,把O_TO_PG表复制表结构,会生成一个O_TO_PG.copy1的仅有表结构的新表。

2)、创建表结构

Navicat 工具栏,选择工具-->数据传输-->源选择Oracle、目标选PG-->勾选仅有表结构的表O_TO_PG.copy1-->点击完成-->执行结果界面出现successful即成功。

c03db349eea1475ba10450b6df6d7001.png

3)、优化表名、数据类型、精度等

在PG数据库表中出现O_TO_PG.copy1,修改表名为O_TO_PG,修改数据类型和精度。

在Oracle数据库中数据类型为NUMBER(包含整型和浮点)的,传输到PG数据库为numeric(1000,53)(包含整型和浮点)。

选中表-->表设计 中修改表结构:

把所有numeric(1000,53)改为numeric(即长度为0,小数点为0),修改好点击保存。

注:为了更好的跟Python中的float类型和int类型匹配,避免在数据传输过程中类型转换的精度损失。最好把浮点数设置为float8,整型设置为int8。

其他字段的数据类型和精度根据表具体情况和项目要求进行修改,主外键建议在表数据迁移后设置,提高表数据传输效率。

2、表数据迁移

1)、 Navicat 工具栏,选择工具-->数据传输-->源选择Oracle、目标选PG-->勾选表O_TO_PG-->底部选项设置:创建前删除表(不要勾选)-->点击完成-->执行结果界面出现successful即成功。

c03db349eea1475ba10450b6df6d7001.png

注:已建好表结构,传输表数据时记得 创建前删除表不要勾选。

锁住源表:在源数据库锁住表,一旦触发数据传输,任何在表的都不允许更新。

二、PG数据库大小写敏感

1、Pgsql引用大写的对象名字(任意对象名:比如列名,索引名、字段名等)

PostgreSQL对于数据库中对象的名字允许使用支持大小写区分的定义和引用方法。方式就是在DDL中用双引号把希望支持大小的对象名括起来。

# 在python中使用Pgsql,访问PG数据库中的表
import datetime
pg_cols_dict  = {'STUDENT': ['ID','NAME','START_TIME']}
ONE_DAYS_BEFORE = datetime.date.today() - datetime.timedelta(days=2)

# 查询数据
def get_pg_data(table_name):
    
    sql = "SELECT {} FROM \"{}\" WHERE \"START_TIME\" >= TO_DATA('{}','YYYYMMDD');".format(
        ','.join(['"' + col + '"' for col in pg_cols_dict.get(table_name)]),table_name,ONE_DAYS_BEFORE.strftime('%Y%m%d'))
    print(sql)
    
get_pg_data(table_name = 'STUDENT')
# 结果sql = SELECT "ID","NAME","START_TIME" FROM "STUDENT" WHERE "START_TIME" >= TO_DATA('20230629','YYYYMMDD');
# 注:Pgsql默认将双引号内的内容视为标识符而不是字符串,
# 所以引用字段名时'"' + col + '"'需要用单引号把双引号括起来,# 引用表名和字段名时\"{}\" 、\"START_TIME\" 双引号前加\转义。

# 插入数据
def write_pg_data(table_name):
    
    sql = "INSERT INTO \"{}\" ({}) VALUES ({});".format(
        table_name,','.join(['%s' for i in range(len(pg_cols_dict.get(table_name)))]))
    print(sql)
    # cursor.execute(sql,data)  # data为数据的元组或列表,可避免SQL注入攻击
    
write_pg_data(table_name = 'STUDENT')
# 结果sql = INSERT INTO "STUDENT" ("ID","START_TIME") VALUES (%s,%s,%s);


2、Pgsql大小写规则

字段名为小写:不区分大小写,不管大小写都一律转为为小写。

字段名为大写:区分大小写,并且需要加上双引号才能识别。

3、修改表名、字段名为小写

https://www.cnblogs.com/bcodepod/p/13675068.html

-- 创建exec(sqlstring)函数方便执行
CREATE OR REPLACE FUNCTION "public"."exec"("sqlstring" varchar)
  RETURNS "pg_catalog"."varchar" AS $BODY$
    declare
        res varchar(50);
    BEGIN
        EXECUTE sqlstring;
        RETURN 'ok';
    END
$BODY$
  LANGUAGE plpgsql VOLATILE
  COST 100
-- 其中public是你的用户名
-- 通过条件拼接SQL,
-- 根据条件查询所有大写的column
select * from information_schema.columns where table_schema='public' and table_name<>'pg_stat_statements' and column_name <> lower(column_name);

-- 修改条件后,通过下列语句转换column_name中的大写字母
SELECT
    exec('alter table "' || table_name || '" rename column  "' || column_name || '" to ' || lower( column_name ) || ';')
FROM
    information_schema.COLUMNS 
WHERE
    table_schema = 'public' 
    AND column_name <> lower(column_name)
    AND table_name <> 'pg_stat_statements' 
    AND table_name = 'prescribe_state_copy1';
    
-- 查询大写的table_name
SELECT * FROM information_schema.TABLES WHERE   table_schema = 'public' AND table_catalog = 'Guns' AND table_name <> lower( table_name );

-- 修改表名中的大写为小写
SELECT
    exec ( 'alter table "' || table_name || '" rename to ' || lower( table_name ) || ';' ) 
FROM
    information_schema.tables 
WHERE
    table_schema='public' 
    and table_catalog = 'Guns' 
    and table_name <> lower(table_name);

 三、数据类型(PG数据库与Python交互时)

sql = '''CREATE TABLE "user_name"."TEST" (
    "均数" float8, 
    "人数" int8,
    "个数" int4)'''
    # 在PG数据库中是float8(53,0)、int8(64,0)、int4(32,0)。
    # float8(double precision) 是存储双精度浮点数,即64位浮点数,与Python中的float64类型匹配。
    # int8(bigint) 是一个64位整数类型,与Python中的int64类型的范围是一致的,在使用PG数据库与Python进行数据交互时,可以使用BIGINT类型来保证数据的精度不会受到影响。
    # int4(integer)是固定长度的整数类型,占用4个字节,与Python中的int类型匹配。

原文地址:https://blog.csdn.net/zlz678678/article/details/131487221

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


文章浏览阅读601次。Oracle的数据导入导出是一项基本的技能,但是对于懂数据库却不熟悉Oracle的同学可能会有一定的障碍。正好在最近的一个项目中碰到了这样一个任务,于是研究了一下Oracle的数据导入导出,在这里跟大家分享一下。......_oracle 迁移方法 对比
文章浏览阅读553次。开头还是介绍一下群,如果感兴趣polardb ,mongodb ,mysql ,postgresql ,redis 等有问题,有需求都可以加群群内有各大数据库行业大咖,CTO,可以解决你的问题。加群请联系 liuaustin3 ,在新加的朋友会分到2群(共700多人左右 1 + 2)。最近我们在使用MYSQL 8 的情况下(8.025)在数据库运行中出现一个问题 参数prefer_order_i..._mysql prefer_ordering_index
文章浏览阅读3.5k次,点赞3次,收藏7次。折腾了两个小时多才成功连上,在这分享一下我的经验,也仅仅是经验分享,有不足的地方欢迎大家在评论区补充交流。_navicat连接opengauss
文章浏览阅读2.7k次。JSON 代表 JavaScript Object Notation。它是一种开放标准格式,将数据组织成中详述的键/值对和数组。_postgresql json
文章浏览阅读2.9k次,点赞2次,收藏6次。navicat 连接postgresql 注:navicat老版本可能报错。1.在springboot中引入我们需要的依赖以及相应版本。用代码生成器生成代码后,即可进行增删改查(略)安装好postgresql 略。更改配置信息(注释中有)_mybatisplus postgresql
文章浏览阅读1.4k次。postgre进阶sql,包含分组排序、JSON解析、修改、删除、更新、强制踢出数据库所有使用用户、连表更新与删除、获取今年第一天、获取近12个月的年月、锁表处理、系统表使用(查询所有表和字段及注释、查询表占用空间)、指定数据库查找模式search_path、postgre备份及还原_pgsql分组取每组第一条
文章浏览阅读3.3k次。上一篇我们学习了日志清理,日志清理虽然解决了日志膨胀的问题,但就无法再恢复检查点之前的一致性状态。因此,我们还需要日志归档,pg的日志归档原理和Oracle类似,不过归档命令需要自己配置。以下代码在postmaster.c除了开启归档外,还需要保证wal_level不能是MINIMAL状态(因为该状态下有些操作不会记录日志)。在db启动时,会同时检查archive_mode和wal_level。以下代码也在postmaster.c(PostmasterMain函数)。......_postgresql archive_mode
文章浏览阅读3k次。系统:ubuntu22.04.3目的:利用向日葵实现windows远程控制ubuntu。_csdn局域网桌面控制ubuntu
文章浏览阅读1.6k次。表分区是解决一些因单表过大引用的性能问题的方式,比如某张表过大就会造成查询变慢,可能分区是一种解决方案。一般建议当单表大小超过内存就可以考虑表分区了。1,继承式分区,分为触发器(trigger)和规则(rule)两种方式触发器的方式1)创建表CREATE TABLE "public"."track_info_trigger_partition" ( "id" serial, "object_type" int2 NOT NULL DEFAULT 0, "object_name..._pg数据表分区的实现
文章浏览阅读3.3k次。物联网平台开源的有几个,就我晓得的有、、thingskit、JetLink、DG-iot(还有其他开源的,欢迎在评论区留言哦!),然后重点分析了下ThingsBoard、ThingsPanel和JetLink,ThingsBoard和Jetlinks是工程师思维产品,可以更多的通过配置去实现开发的目的,ThingsPanel是业务人员思路产品,或者开发或者用,避免了复杂的配置带来的较高学习门槛。ThingsBoard和Jetlinks是Java技术体系的,ThingsPanel是PHP开发的。_jetlinks和thingsboard
文章浏览阅读3.8k次。PostgreSQL 数据类型转换_pgsql数字转字符串
文章浏览阅读7k次,点赞3次,收藏14次。在做数据统计页面时,总会遇到统计某段时间内,每天、每月、每年的数据视图(柱状图、折线图等)。这些统计数据一眼看过去也简单呀,不就是按照时间周期(天、月、年)对统计数据进行分个组就完了嘛?但是会有一个问题,简单的写个sql对周期分组,获取到的统计数据是缺失的,即没有数据的那天,整条记录也都没有了。如下图需求:以当前月份(2023年2月)为起点,往后倒推一年,查询之前一年里每个月的统计数据。可见图中的数据其实是缺少的,这条sql只查询到了有数据的月份(23年的1月、2月,22年的12月)_如何用一条sql查出按年按月按天的汇总
文章浏览阅读3.8k次,点赞66次,收藏51次。PostgreSQL全球开发小组与2022年10月13日,宣布发布PostgreSQL15,这是世界上最先进的开源数据库的最新版本_mysql8 postgresql15
文章浏览阅读1.3k次。上文介绍了磁盘管理器中VFD的实现原理,本篇将从上层角度讲解磁盘管理器的工作细节。_smgrrelationdata
文章浏览阅读1.1k次。PostgreSQL设置中文语言界面和局域网访问_postgressql汉化
文章浏览阅读4.2k次。PostgreSQL 修改数据存储路径_如何设置postgresql 数据目录
文章浏览阅读4.7k次。在项目中用到了多数据源,在连接postgres数据库时,项目启动报错,说数据库连接错误,说dual不存在,网上好多教程都是说数据库查询的时候的大小写问题,而这个仅仅是连接,咋鞥却处理方法是修改application-dev.yml中的配置文件.项目中的druid参数是这样的:确实在配置文件中有个查询语句。_relation "dual" does not exist
文章浏览阅读4.9k次。PostgreSQL是一款强大的关系型数据库,但在实际使用过程中,许多用户经常会遇到慢SQL的问题。这些问题不仅会降低数据库性能,还会直接影响业务流程和用户体验。因此,本文将会深入分析PostgreSQL慢SQL的原因和优化方案,帮助用户更好地利用这个优秀的数据库系统。无论你是初学者还是专业开发者,本文都将为你提供实用的技巧和方法,让你的PostgreSQL数据库始终保持高效快速。_postgresql数据库优化
文章浏览阅读1.6k次。Linux配置postgresql开机自启_linux 启动pgsql
文章浏览阅读2k次。本篇介绍如何在centos7系统搭建一个postgresql主备集群实现最近的HA(高可用)架构。后续更高级的HA模式都是基于这个最基本的主备搭建。_postgresql主备