Oracle转换Postgres

本文涉及的产品
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
云原生数据库 PolarDB MySQL 版,通用型 2核8GB 50GB
简介: Oracle转换Postgres

1、前提


首先需要对OraclePostgreSQLSQL都比较熟悉。对其理解的越详细就越具有优势,本文帮助读者迅速理解这两类SQL的区别是什么。

如果因ACS/pg而需要将Oracle移植到PG,那么就需要熟悉AOLserver Tcl,尤其是SOLserverAPI。本文,主要讨论:

Oracle 10g11g(大多数可以适用到8i

Oracle 12c某些方面会有不同,但是迁移更加便捷

PostgreSQL 8.4,甚至适用更早版本。


2、事务


Oracle这个数据库会使用事务,那么PostgreSQL也需要激活事务。多个DML语句组成一个代码片段,而这些语句不会立即提交,那么就需要使用BEGIN语句开启一个事务,然后将这些语句包含在BEGIN这个块中。OraclePGROLLBACKCOMMITSAVEPOINT的语义相同。Oracle的隔离级别,PostgreSQL中也有。大多数情况下PG的隔离级别(读已提交)就已满足需求。


3、语法差异


PG中有少数语法不同但功能相同SQLACS/pg会自动进行转换,只有大部分函数不同,需要手工进行转换。这个工作由db_sql_prep来完成。

函数

Oracle有超过250个内置单行函数和不止50个聚合函数,详情查看:https://wiki.postgresql.org/wiki/Oracle_Functions

Sysdate

Oracle使用sysdate函数获取当前日期和时间(以服务器的时区为准)。Postgres使用now::timestamp作为当前事务启动的日期和时间。ACS/pg将这个包装成sysdate()函数。

ACS/pg还包括Tcl过程,即db_sysdate。因此:

set now [database_to_tcl_string $db "select sysdate from dual"]

应该变成:

set now [database_to_tcl_string $db "select [db_sysdate] from dual"]

Dual

OracleSELECT中实际不需要表名的地方可以使用表DUAL,因为Oracle中的FROM子句是必须的。Postgsql中可以将FROM子句丢弃。可以在postgres中创建一个视图作为这个表从而消除上述问题。这样就可以在不干扰Postgres的解析器情况下兼容OracleSQL。迁移过程中,尽可能去掉“FROM DUAL”子句。因为和jual进行join比较奇怪。

ROWNUMROWID

Oracle的虚拟列ROWNUM:在执行ORDER BY前读取数据时分配一个数值。很多场景下可以使用ROW_NUMBER() OVER(ORDER BY...)替代。但是使用序列进行模拟时可能会使性能慢些。

Oracle的虚拟列ROWID:表行的物理地址,以base64编码。应用中可以使用该列临时缓存行地址,使第二次访问时更加便捷。Postgresctid起同样的作用。

序列

Oracle的序列语法是sequence_name.nextval

Postgres的序列语法是nextval('sequence_name')

Tcl中,获取写一个序列值可以抽象为调用[db_sequence_nextval $db sequence_name]。如果需要在一个复杂的SQL语句中使用序列值,可以使用 [db_sequence_nextval_sql sequence_name]

解码

Oracle的解码函数使用方法:decode(expr, search, result [, search, result...] [, default])

为了评估这个表达式,Oracle一个一个地比较exprsearch值。如果expr等于searchOracle返回对应的result。如果没有找到匹配值,返回default或者null

Postgres没有这样的结构,但是可以使用下面格式替代:

CASE WHEN expr THEN expr [...] ELSE expr END

例如:CASE WHEN c1 = 1 THEN 'match' ELSE 'no match' END,返回第一个为真的谓词对应的表达式。

DECODECASE的模拟方式有一点不同:DECODE (x,NULL,'null','else'),如果xNULL则返回NULL;而CASE x WHEN NULL THEN 'null' ELSE 'else' END,则返回elseresultOracle同样。

NVL

Oracle还有其他便捷函数:NVL。如果不为NULLNVL返回第一个参数,否则返回第二个参数:start_date := NVL(hire_date, SYSDATE);。如果hire_dateNULL,则前面的语句会返回SYSDATEPostgresOracle有一个函数以更普遍的方式执行同样的行为:coalesce(expr1, expr2, expr3,....),返回第一个非NULL表达式。

FROM中子查询

Postgresql中子查询需要使用括号包含,并提供一个别名。Oracle中不需要别名:

OracleSELECT * FROM (SELECT * FROM table_a)

PostgresqlSELECT * FROM (SELECT * FROM table_a) AS foo


4、功能差异


Postgresql并不具备Oracle所有功能。ACS/pg通过指定的方案解决这些限制。虽然postgres具备大部分功能,但是一些特性还需要等待其新版本发布。

Outer joins

Oracle老版本9i之前,outer join

SELECT a.field1, b.field2

FROM a, b

WHERE a.item_id = b.item_id(+)

(+)表示,如果表b中没有匹配的item_id值,匹配会继续下去,会作为一个空行进行匹配。PostgresqlOracle 9i及之前版本:

SELECT a.field1, b.field2

FROM a

LEFT OUTER JOIN b

ON a.item_id = b.item_id;

只有汇聚值从outer joined表中提取时,也可能不使用join。如果原始查询:

SELECT a.field1, sum (b.field2)

FROM a, b

WHERE a.item_id = b.item_id (+)

GROUP BY a.field1

Postgres的查询:SELECT a.field1, b_sum_field2_by_item_id (a.item_id) FROM a,此时可以定义函数:

CREATE FUNCTION b_sum_field2_by_item_id (integer)

RETURNS integer

AS '

DECLARE

    v_item_id alias for $1;

BEGIN

    RETURN sum(field2) FROM b WHERE item_id = v_item_id;

END;

' language 'plpgsql';

Oracle 9i开始将支持SQL 99outer join语法。但是一些程序员仍然使用旧语法,所以这篇文章显得有意义。

CONNECT BY

Postgres不支持connect by语句。可以使用WITH RECURSIVE替代。由于WITH RECURSIVE是图灵完毕的,因此很容易将CONNECT BY语句转换成WITH RECURSIVE。有时还可以将CONNECT BY当做一个简单的iterator

SELECT ... FROM DUAL CONNECT BY rownum <=10

等价于:

SELECT ... FROM generate_series(...)

NO_DATA_FOUND and TOO_MANY_ROWS

默认情况下PL/pgsql禁止使用此异常。当需要在存储的PLpgSQL代码中进行单行检查时,需要在所有SELECT中的任何关键字INTO之后添加关键字STRICT


5、数据类型


Postgres严格尊周SQL表中,而Oracle由于历史原因,会有自己特有的方式,尤其是数据类型方面。

空字符串与NULL

Oracle中,strings()空和NULL在字符串内容中相同。可以将NULL和和一个字符串连接起来作为结果。但是在postgres中,这种情况得到的结果是NULLOracle中需要使用IS NULL操作符来检测字符串是否为空。Postgres中,对于空字符串得到的结果是FALSE,而NULL得到的是TRUE。当从Oraclepostgres转换时,需要分析字符代码,分离出NULL和空字符串。

Numeric类型


Oracle中经常使用NUMBER数据类型,PG中对应的数据类型时DECIMAL或者NUMERICPG中的numbers限制(小数点前到131072位,小数点后16383位)比Oracle高,内部存储方式相同。OracleFLOATPG中是REALDOUBLEDOUBLE PRECISION

Date and Time


Oracle中的DATE包含datatime。很多中情况下,使用PG中的TIMESTAMP就足够了。由于date只包含秒、分、小时、天、月和年,所以一些情况下不是精确的结果。没有几分钟、没有夏令时、没有时区。OracleTIMESTAMPPG类似。

Oracle只有INTERVAL YEAR TO MONTH and INTERVAL DAY TO SECOND,因此PG可以直接使用。


CLOBs


PGTEXT的形式对CLOB有不错的支持。


BLOBs


PG对二进制大对象支持非常差。因为不能使用pg_dump进行dump所以不适合在24/7环境中使用。利用大对象的数据库进行备份时,需要将数据库关闭,然后直接备份数据目录。

Don Baccus修改了SOLserverPG驱动,通过编码/解码二进制文件,从而支持二进制大对象。数据库在运行时进行dump,这些结果对象可以用来保证一致性,从而在备份时不需要中断服务。

为了绕过PG对元组大小对于一个块的限制,驱动程序将编码的数据分成8K大小的块。PG将在2000年夏天对大对象进行大修。因此,只实现了ACS使用的BLOB功能。

为了使用BLOB驱动扩展,首先需要创建一个表,其lob列定义为interger类型,再创建一个触发器on_lob_ref。例如:

create table my_table (
    my_key integer primary key,
    lob integer references lobs,
    my_other_data some_type -- etc
);

创建一个触发器my_table_lob_trig,在insertdeleteupdate前触发:

set lob [database_to_tcl_string $db "select empty_lob()"]
ns_db dml $db "begin"
ns_db dml $db "update my_table set lob = $lob where my_key = $my_key"
ns_pg blob_dml_file $db $lob $tmp_filename
ns_db dml $db "end"

 

主要,调用时需将其包装在一个事务中,即使此时没有进行update。:

set lob [database_to_tcl_string $db "select lob from my_table

                                    where my_key = $my_key"]

ns_pg blob_write $db $lob

 

6、其他工具


Ispirer MnMTK:自动迁移整个数据库schema并将Oracle数据转换成PG的数据的工具集。

Full Convert:将Oracle转换成PG,每秒100K个记录。

Oracle to Postgres data migration and sync:每4-5分钟转换1M个记录。基于触发器的数据库同步方法和并行双向同步方式可帮助轻松地管理数据。

ESF Database Migration Toolkit:直连OraclePG,迁移表结构、数据、索引、主键、外键、内容等。

Orafce:兼容Oracle的函数。比如date函数(next_day,last_day,trunc,round等)、字符串函数、一些包DBMS_ALERT, DBMS_OUTPUT, UTL_FILE, DBMS_PIPE等。

Ora2pgPerl脚本,兼容schema。连接Oracle,提取结构,产生SQL语句然后加载到PG

Oracle to postgres:不使用ODBC和其他中间件。转换表结构、数据、索引、主键和外键。

ora_migratorPL/pgSQL扩展,充分利用OracleForeign Data Wrapper


7、原文


https://wiki.postgresql.org/wiki/Oracle_to_Postgres_Conversion

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍如何基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
Oracle 关系型数据库 数据库
|
Oracle 关系型数据库 SQL
oracle迁移postgres之-oracle_fdw
oracle迁移postgres之-oracle_fdw
4691 0
|
2月前
|
Oracle 关系型数据库 Linux
【赵渝强老师】Oracle数据库配置助手:DBCA
Oracle数据库配置助手(DBCA)是用于创建和配置Oracle数据库的工具,支持图形界面和静默执行模式。本文介绍了使用DBCA在Linux环境下创建数据库的完整步骤,包括选择数据库操作类型、配置存储与网络选项、设置管理密码等,并提供了界面截图与视频讲解,帮助用户快速掌握数据库创建流程。
341 93
|
1月前
|
Oracle 关系型数据库 Linux
【赵渝强老师】使用NetManager创建Oracle数据库的监听器
Oracle NetManager是数据库网络配置工具,用于创建监听器、配置服务命名与网络连接,支持多数据库共享监听,确保客户端与服务器通信顺畅。
176 0
|
4月前
|
存储 Oracle 关系型数据库
服务器数据恢复—光纤存储上oracle数据库数据恢复案例
一台光纤服务器存储上有16块FC硬盘,上层部署了Oracle数据库。服务器存储前面板2个硬盘指示灯显示异常,存储映射到linux操作系统上的卷挂载不上,业务中断。 通过storage manager查看存储状态,发现逻辑卷状态失败。再查看物理磁盘状态,发现其中一块盘报告“警告”,硬盘指示灯显示异常的2块盘报告“失败”。 将当前存储的完整日志状态备份下来,解析备份出来的存储日志并获得了关于逻辑卷结构的部分信息。
|
2月前
|
SQL Oracle 关系型数据库
Oracle数据库创建表空间和索引的SQL语法示例
以上SQL语法提供了一种标准方式去组织Oracle数据库内部结构,并且通过合理使用可以显著改善查询速度及整体性能。需要注意,在实际应用过程当中应该根据具体业务需求、系统资源状况以及预期目标去合理规划并调整参数设置以达到最佳效果。
278 8
|
4月前
|
SQL Oracle 关系型数据库
比较MySQL和Oracle数据库系统,特别是在进行分页查询的方法上的不同
两者的性能差异将取决于数据量大小、索引优化、查询设计以及具体版本的数据库服务器。考虑硬件资源、数据库设计和具体需求对于实现优化的分页查询至关重要。开发者和数据库管理员需要根据自身使用的具体数据库系统版本和环境,选择最合适的分页机制,并进行必要的性能调优来满足应用需求。
244 11
|
4月前
|
Oracle 关系型数据库 数据库
数据库数据恢复—服务器异常断电导致Oracle数据库报错的数据恢复案例
Oracle数据库故障: 某公司一台服务器上部署Oracle数据库。服务器意外断电导致数据库报错,报错内容为“system01.dbf需要更多的恢复来保持一致性”。该Oracle数据库没有备份,仅有一些断断续续的归档日志。 Oracle数据库恢复流程: 1、检测数据库故障情况; 2、尝试挂起并修复数据库; 3、解析数据库文件; 4、导出并验证恢复的数据库文件。
|
4月前
|
存储 Oracle 关系型数据库
【赵渝强老师】Oracle RMAN的目录数据库
Oracle RMAN默认将备份元信息存储在控制文件中,但控制文件损坏或丢失会导致恢复失败,且备份增多会使控制文件无限增长。为解决这些问题,Oracle引入了RMAN目录数据库(Catalog Database),专门用于存储RMAN备份的元信息。使用目录数据库可提升备份管理效率,支持多数据库共享、长期备份历史记录存储,并可保存RMAN脚本。本文详细介绍了如何创建目录数据库、注册目标数据库及其操作步骤。
124 0
|
7月前
|
Oracle 安全 关系型数据库
【Oracle】使用Navicat Premium连接Oracle数据库两种方法
以上就是两种使用Navicat Premium连接Oracle数据库的方法介绍,希望对你有所帮助!
1524 28