Oracle转换Postgres

本文涉及的产品
云原生数据库 PolarDB MySQL 版,通用型 2核4GB 50GB
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
简介: Oracle转换Postgres

1、前提


首先需要对OraclePostgreSQLSQL都比较熟悉。对其理解的越详细就越具有优势,本文帮助读者迅速理解这两类SQL的区别是什么。

如果因ACS/pg而需要将Oracle移植到PG,那么就需要熟悉AOLserver Tcl,尤其是SOLserverAPI。本文,主要讨论:

Oracle 10g11g(大多数可以适用到8i

Oracle 12c某些方面会有不同,但是迁移更加便捷

PostgreSQL 8.4,甚至适用更早版本。


2、事务


Oracle这个数据库会使用事务,那么PostgreSQL也需要激活事务。多个DML语句组成一个代码片段,而这些语句不会立即提交,那么就需要使用BEGIN语句开启一个事务,然后将这些语句包含在BEGIN这个块中。OraclePGROLLBACKCOMMITSAVEPOINT的语义相同。Oracle的隔离级别,PostgreSQL中也有。大多数情况下PG的隔离级别(读已提交)就已满足需求。


3、语法差异


PG中有少数语法不同但功能相同SQLACS/pg会自动进行转换,只有大部分函数不同,需要手工进行转换。这个工作由db_sql_prep来完成。

函数

Oracle有超过250个内置单行函数和不止50个聚合函数,详情查看:https://wiki.postgresql.org/wiki/Oracle_Functions

Sysdate

Oracle使用sysdate函数获取当前日期和时间(以服务器的时区为准)。Postgres使用now::timestamp作为当前事务启动的日期和时间。ACS/pg将这个包装成sysdate()函数。

ACS/pg还包括Tcl过程,即db_sysdate。因此:

set now [database_to_tcl_string $db "select sysdate from dual"]

应该变成:

set now [database_to_tcl_string $db "select [db_sysdate] from dual"]

Dual

OracleSELECT中实际不需要表名的地方可以使用表DUAL,因为Oracle中的FROM子句是必须的。Postgsql中可以将FROM子句丢弃。可以在postgres中创建一个视图作为这个表从而消除上述问题。这样就可以在不干扰Postgres的解析器情况下兼容OracleSQL。迁移过程中,尽可能去掉“FROM DUAL”子句。因为和jual进行join比较奇怪。

ROWNUMROWID

Oracle的虚拟列ROWNUM:在执行ORDER BY前读取数据时分配一个数值。很多场景下可以使用ROW_NUMBER() OVER(ORDER BY...)替代。但是使用序列进行模拟时可能会使性能慢些。

Oracle的虚拟列ROWID:表行的物理地址,以base64编码。应用中可以使用该列临时缓存行地址,使第二次访问时更加便捷。Postgresctid起同样的作用。

序列

Oracle的序列语法是sequence_name.nextval

Postgres的序列语法是nextval('sequence_name')

Tcl中,获取写一个序列值可以抽象为调用[db_sequence_nextval $db sequence_name]。如果需要在一个复杂的SQL语句中使用序列值,可以使用 [db_sequence_nextval_sql sequence_name]

解码

Oracle的解码函数使用方法:decode(expr, search, result [, search, result...] [, default])

为了评估这个表达式,Oracle一个一个地比较exprsearch值。如果expr等于searchOracle返回对应的result。如果没有找到匹配值,返回default或者null

Postgres没有这样的结构,但是可以使用下面格式替代:

CASE WHEN expr THEN expr [...] ELSE expr END

例如:CASE WHEN c1 = 1 THEN 'match' ELSE 'no match' END,返回第一个为真的谓词对应的表达式。

DECODECASE的模拟方式有一点不同:DECODE (x,NULL,'null','else'),如果xNULL则返回NULL;而CASE x WHEN NULL THEN 'null' ELSE 'else' END,则返回elseresultOracle同样。

NVL

Oracle还有其他便捷函数:NVL。如果不为NULLNVL返回第一个参数,否则返回第二个参数:start_date := NVL(hire_date, SYSDATE);。如果hire_dateNULL,则前面的语句会返回SYSDATEPostgresOracle有一个函数以更普遍的方式执行同样的行为:coalesce(expr1, expr2, expr3,....),返回第一个非NULL表达式。

FROM中子查询

Postgresql中子查询需要使用括号包含,并提供一个别名。Oracle中不需要别名:

OracleSELECT * FROM (SELECT * FROM table_a)

PostgresqlSELECT * FROM (SELECT * FROM table_a) AS foo


4、功能差异


Postgresql并不具备Oracle所有功能。ACS/pg通过指定的方案解决这些限制。虽然postgres具备大部分功能,但是一些特性还需要等待其新版本发布。

Outer joins

Oracle老版本9i之前,outer join

SELECT a.field1, b.field2

FROM a, b

WHERE a.item_id = b.item_id(+)

(+)表示,如果表b中没有匹配的item_id值,匹配会继续下去,会作为一个空行进行匹配。PostgresqlOracle 9i及之前版本:

SELECT a.field1, b.field2

FROM a

LEFT OUTER JOIN b

ON a.item_id = b.item_id;

只有汇聚值从outer joined表中提取时,也可能不使用join。如果原始查询:

SELECT a.field1, sum (b.field2)

FROM a, b

WHERE a.item_id = b.item_id (+)

GROUP BY a.field1

Postgres的查询:SELECT a.field1, b_sum_field2_by_item_id (a.item_id) FROM a,此时可以定义函数:

CREATE FUNCTION b_sum_field2_by_item_id (integer)

RETURNS integer

AS '

DECLARE

    v_item_id alias for $1;

BEGIN

    RETURN sum(field2) FROM b WHERE item_id = v_item_id;

END;

' language 'plpgsql';

Oracle 9i开始将支持SQL 99outer join语法。但是一些程序员仍然使用旧语法,所以这篇文章显得有意义。

CONNECT BY

Postgres不支持connect by语句。可以使用WITH RECURSIVE替代。由于WITH RECURSIVE是图灵完毕的,因此很容易将CONNECT BY语句转换成WITH RECURSIVE。有时还可以将CONNECT BY当做一个简单的iterator

SELECT ... FROM DUAL CONNECT BY rownum <=10

等价于:

SELECT ... FROM generate_series(...)

NO_DATA_FOUND and TOO_MANY_ROWS

默认情况下PL/pgsql禁止使用此异常。当需要在存储的PLpgSQL代码中进行单行检查时,需要在所有SELECT中的任何关键字INTO之后添加关键字STRICT


5、数据类型


Postgres严格尊周SQL表中,而Oracle由于历史原因,会有自己特有的方式,尤其是数据类型方面。

空字符串与NULL

Oracle中,strings()空和NULL在字符串内容中相同。可以将NULL和和一个字符串连接起来作为结果。但是在postgres中,这种情况得到的结果是NULLOracle中需要使用IS NULL操作符来检测字符串是否为空。Postgres中,对于空字符串得到的结果是FALSE,而NULL得到的是TRUE。当从Oraclepostgres转换时,需要分析字符代码,分离出NULL和空字符串。

Numeric类型


Oracle中经常使用NUMBER数据类型,PG中对应的数据类型时DECIMAL或者NUMERICPG中的numbers限制(小数点前到131072位,小数点后16383位)比Oracle高,内部存储方式相同。OracleFLOATPG中是REALDOUBLEDOUBLE PRECISION

Date and Time


Oracle中的DATE包含datatime。很多中情况下,使用PG中的TIMESTAMP就足够了。由于date只包含秒、分、小时、天、月和年,所以一些情况下不是精确的结果。没有几分钟、没有夏令时、没有时区。OracleTIMESTAMPPG类似。

Oracle只有INTERVAL YEAR TO MONTH and INTERVAL DAY TO SECOND,因此PG可以直接使用。


CLOBs


PGTEXT的形式对CLOB有不错的支持。


BLOBs


PG对二进制大对象支持非常差。因为不能使用pg_dump进行dump所以不适合在24/7环境中使用。利用大对象的数据库进行备份时,需要将数据库关闭,然后直接备份数据目录。

Don Baccus修改了SOLserverPG驱动,通过编码/解码二进制文件,从而支持二进制大对象。数据库在运行时进行dump,这些结果对象可以用来保证一致性,从而在备份时不需要中断服务。

为了绕过PG对元组大小对于一个块的限制,驱动程序将编码的数据分成8K大小的块。PG将在2000年夏天对大对象进行大修。因此,只实现了ACS使用的BLOB功能。

为了使用BLOB驱动扩展,首先需要创建一个表,其lob列定义为interger类型,再创建一个触发器on_lob_ref。例如:

create table my_table (
    my_key integer primary key,
    lob integer references lobs,
    my_other_data some_type -- etc
);

创建一个触发器my_table_lob_trig,在insertdeleteupdate前触发:

set lob [database_to_tcl_string $db "select empty_lob()"]
ns_db dml $db "begin"
ns_db dml $db "update my_table set lob = $lob where my_key = $my_key"
ns_pg blob_dml_file $db $lob $tmp_filename
ns_db dml $db "end"

 

主要,调用时需将其包装在一个事务中,即使此时没有进行update。:

set lob [database_to_tcl_string $db "select lob from my_table

                                    where my_key = $my_key"]

ns_pg blob_write $db $lob

 

6、其他工具


Ispirer MnMTK:自动迁移整个数据库schema并将Oracle数据转换成PG的数据的工具集。

Full Convert:将Oracle转换成PG,每秒100K个记录。

Oracle to Postgres data migration and sync:每4-5分钟转换1M个记录。基于触发器的数据库同步方法和并行双向同步方式可帮助轻松地管理数据。

ESF Database Migration Toolkit:直连OraclePG,迁移表结构、数据、索引、主键、外键、内容等。

Orafce:兼容Oracle的函数。比如date函数(next_day,last_day,trunc,round等)、字符串函数、一些包DBMS_ALERT, DBMS_OUTPUT, UTL_FILE, DBMS_PIPE等。

Ora2pgPerl脚本,兼容schema。连接Oracle,提取结构,产生SQL语句然后加载到PG

Oracle to postgres:不使用ODBC和其他中间件。转换表结构、数据、索引、主键和外键。

ora_migratorPL/pgSQL扩展,充分利用OracleForeign Data Wrapper


7、原文


https://wiki.postgresql.org/wiki/Oracle_to_Postgres_Conversion

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
Oracle 关系型数据库 数据库
|
Oracle 关系型数据库 SQL
oracle迁移postgres之-oracle_fdw
oracle迁移postgres之-oracle_fdw
4549 0
|
2月前
|
存储 Oracle 关系型数据库
Oracle数据库的应用场景有哪些?
【10月更文挑战第15天】Oracle数据库的应用场景有哪些?
200 64
|
18天前
|
存储 Oracle 关系型数据库
数据库数据恢复—ORACLE常见故障的数据恢复方案
Oracle数据库常见故障表现: 1、ORACLE数据库无法启动或无法正常工作。 2、ORACLE ASM存储破坏。 3、ORACLE数据文件丢失。 4、ORACLE数据文件部分损坏。 5、ORACLE DUMP文件损坏。
65 11
|
1月前
|
Oracle 关系型数据库 数据库
Oracle数据恢复—Oracle数据库文件有坏快损坏的数据恢复案例
一台Oracle数据库打开报错,报错信息: “system01.dbf需要更多的恢复来保持一致性,数据库无法打开”。管理员联系我们数据恢复中心寻求帮助,并提供了Oracle_Home目录的所有文件。用户方要求恢复zxfg用户下的数据。 由于数据库没有备份,无法通过备份去恢复数据库。
|
1月前
|
存储 Oracle 关系型数据库
oracle数据恢复—Oracle数据库文件大小变为0kb的数据恢复案例
存储掉盘超过上限,lun无法识别。管理员重组存储的位图信息并导出lun,发现linux操作系统上部署的oracle数据库中有上百个数据文件的大小变为0kb。数据库的大小缩水了80%以上。 取出&并分析oracle数据库的控制文件。重组存储位图信息,重新导出控制文件中记录的数据文件,发现这些文件的大小依然为0kb。
|
24天前
|
存储 Oracle 关系型数据库
服务器数据恢复—华为S5300存储Oracle数据库恢复案例
服务器存储数据恢复环境: 华为S5300存储中有12块FC硬盘,其中11块硬盘作为数据盘组建了一组RAID5阵列,剩下的1块硬盘作为热备盘使用。基于RAID的LUN分配给linux操作系统使用,存放的数据主要是Oracle数据库。 服务器存储故障: RAID5阵列中1块硬盘出现故障离线,热备盘自动激活开始同步数据,在同步数据的过程中又一块硬盘离线,RAID5阵列瘫痪,上层LUN无法使用。
|
1月前
|
SQL Oracle 关系型数据库
Oracle数据库优化方法
【10月更文挑战第25天】Oracle数据库优化方法
56 7
|
1月前
|
Oracle 关系型数据库 数据库
oracle数据库技巧
【10月更文挑战第25天】oracle数据库技巧
34 6
|
1月前
|
存储 Oracle 关系型数据库
Oracle数据库优化策略
【10月更文挑战第25天】Oracle数据库优化策略
34 5