PostgreSQL升级之pg_upgrade升级

本文涉及的产品
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
云原生数据库 PolarDB MySQL 版,通用型 2核4GB 50GB
简介:

PostgreSQL中的升级,如果针对小版本的升级,比如9.6.1升级到9.6.2(当前的最新版本),只需要用9.6.2版本的软件替换9.6.1版本的软件即可,不需要做额外的操作,因为整个大版本是相互兼容的,内部存储形式也是兼容的。但如果涉及到跨大版本升级比如9.4.11升级到9.6.2,这种直接替换软件就不行了,因为跨版本的内部存储形式发生了变化。

官方给了三种升级的方式来解决跨版本升级:

  • pg_dumpall

  • pg_upgrade

  • 通过复制

pg_dumpall是一种把数据从旧版本逻辑导出,再导入新版本的方法,就是一个导出导入的过程。

通过复制的方式是创建一个高版本的从库,等数据同步完后主变备,备变主,达到升级的目的。

再一种是通过pg_upgrade命令的升级方式,它是一种快速升级的方法,通过创建新的系统表并使用旧的用户表的方式进行升级。它又分为两种方式:原地升级和非原地升级,原地升级需要指定--link参数。

下面介绍一下使用pg_upgrade做升级的大体步骤:

示例是从9.4.11升级到9.6.2。

1、安装新版本软件

新版本的软件需要保证与旧版本的软件在配置上兼容,pg_upgrade会在升级前检查pg_controldata,确保所有的设置是兼容的。

2、用新版本初始化一个新的数据库

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
[postgres@rhel7 ~]$ /opt/pgsql-9.6.2/bin/initdb -D /pgdata-new/
The files belonging  to  this  database  system will be owned  by  user  "postgres" .
This  user  must also own the server process.
 
The  database  cluster will be initialized  with  locale  "en_US.UTF-8" .
The  default  database  encoding has accordingly been  set  to  "UTF8" .
The  default  text search configuration will be  set  to  "english" .
 
Data page checksums are disabled.
 
fixing permissions  on  existing directory /pgdata-new ... ok
creating subdirectories ... ok
selecting  default  max_connections ... 100
selecting  default  shared_buffers ... 128MB
selecting  dynamic  shared memory implementation ... posix
creating configuration files ... ok
running bootstrap script ... ok
performing post-bootstrap initialization ... ok
syncing data  to  disk ... ok
 
WARNING: enabling  "trust"  authentication  for  local  connections
You can change this  by  editing pg_hba.conf  or  using the  option  -A,  or
--auth-local and --auth-host, the next time you run initdb.
 
Success. You can now start the  database  server using:
 
     /opt/pgsql-9.6.2/bin/pg_ctl -D /pgdata-new/ -l logfile start

3、设置pg_hba.conf,保证pg_upgrade通过连接新旧两个库

4、停止旧库

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
#创建测试表
[postgres@rhel7 ~]$ psql
psql (9.4.11)
Type  "help"  for  help.
                             ^
postgres=#  create  table  zx (id  int );
CREATE  TABLE
postgres=# \d 
         List  of  relations
  Schema  Name  | Type  |  Owner   
--------+------+-------+----------
  public  | zx   |  table  | postgres
(1 row)
 
postgres=#  insert  into  zx  values (1);
INSERT  0 1
postgres=#  select  from  zx;
  id 
----
   1
(1 row)
#停止旧库
[postgres@rhel7 ~]$ /opt/pgsql-9.4/bin/pg_ctl stop -D /usr/ local /pgsql/data/
waiting  for  server  to  shut down.... done
server stopped

5、使用pg_upgrade执行升级

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
[postgres@rhel7 ~]$ /opt/pgsql-9.6.2/bin/pg_upgrade -d /usr/ local /pgsql/data/ -D /pgdata-new/ -b /opt/pgsql-9.4/bin/ -B /opt/pgsql-9.6.2/bin/ 
Performing Consistency Checks
-----------------------------
Checking cluster versions                                   ok
Checking  database  user  is  the install  user                   ok
Checking  database  connection  settings                       ok
Checking  for  prepared transactions                          ok
Checking  for  reg* system OID  user  data types                ok
Checking  for  contrib/isn  with  bigint -passing mismatch       ok
Checking  for  roles starting  with  'pg_'                       ok
Creating dump  of  global  objects                             ok
Creating dump  of  database  schemas
                                                             ok
Checking  for  presence  of  required libraries                 ok
Checking  database  user  is  the install  user                   ok
Checking  for  prepared transactions                          ok
 
If pg_upgrade fails  after  this point, you must re-initdb the
new cluster before continuing.
 
Performing Upgrade
------------------
Analyzing  all  rows  in  the new cluster                       ok
Freezing  all  rows  on  the new cluster                        ok
Deleting files  from  new pg_clog                             ok
Copying old pg_clog  to  new server                           ok
Setting  next  transaction  ID  and  epoch  for  new cluster       ok
Deleting files  from  new pg_multixact/offsets                ok
Copying old pg_multixact/offsets  to  new server              ok
Deleting files  from  new pg_multixact/members                ok
Copying old pg_multixact/members  to  new server              ok
Setting  next  multixact ID  and  offset  for  new cluster        ok
Resetting WAL archives                                      ok
Setting frozenxid  and  minmxid counters  in  new cluster       ok
Restoring  global  objects  in  the new cluster                 ok
Restoring  database  schemas  in  the new cluster
                                                             ok
Copying  user  relation files
                                                             ok
Setting  next  OID  for  new cluster                            ok
Sync data directory  to  disk                                 ok
Creating script  to  analyze new cluster                      ok
Creating script  to  delete  old cluster                       ok
 
Upgrade Complete
----------------
Optimizer  statistics  are  not  transferred  by  pg_upgrade so,
once you start the new server, consider running:
     ./analyze_new_cluster.sh
 
Running this script will  delete  the old cluster's data files:
     ./delete_old_cluster.sh

介绍下使用的参数-b指定旧版本软件的bin目录-B指定新版本软件的bin目录,-d指定旧版本对应的数据目录,-D指定新版本对应的数据目录。

6、启动新版本数据库并做检查

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
[postgres@rhel7 ~]$ /opt/pgsql-9.6.2/bin/pg_ctl start -D /pgdata-new/ -l logfile 
server starting
[postgres@rhel7 ~]$ psql 
psql (9.6.2)
Type  "help"  for  help.
 
postgres=# \d
         List  of  relations
  Schema  Name  | Type  |  Owner   
--------+------+-------+----------
  public  | zx   |  table  | postgres
(1 row)
 
postgres=#  select  from  zx;
  id 
----
   1
(1 row)

7、恢复配置文件如pg_hba.conf、postgresql.conf等

8、收集统计信息

由于升级过程中不会把统计信息传到新库系统表中,需要重新收集统计信息。pg_upgrade的最给出了收集统计信息的脚本:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
[postgres@rhel7 ~]$ ./analyze_new_cluster.sh 
This script will generate minimal optimizer  statistics  rapidly
so your system  is  usable,  and  then  gather  statistics  twice more
with  increasing accuracy.   When  it  is  done, your system will
have the  default  level  of  optimizer  statistics .
 
If you have used  ALTER  TABLE  to  modify  the  statistics  target  for
any  tables, you might want  to  remove them  and  restore them  after
running this script because they will delay fast  statistics  generation.
 
If you would  like  default  statistics  as  quickly  as  possible, cancel
this script  and  run:
     "/opt/pgsql-9.6.2/bin/vacuumdb"  --all --analyze-only
 
vacuumdb: processing  database  "postgres" : Generating minimal optimizer  statistics  (1 target)
vacuumdb: processing  database  "template1" : Generating minimal optimizer  statistics  (1 target)
vacuumdb: processing  database  "postgres" : Generating medium optimizer  statistics  (10 targets)
vacuumdb: processing  database  "template1" : Generating medium optimizer  statistics  (10 targets)
vacuumdb: processing  database  "postgres" : Generating  default  ( full ) optimizer  statistics
vacuumdb: processing  database  "template1" : Generating  default  ( full ) optimizer  statistics
 
Done

9、升级成功后删除旧版本软件和数据。


官方文档:https://www.postgresql.org/docs/9.6/static/pgupgrade.html

https://www.postgresql.org/docs/9.6/static/upgrading.html





      本文转自hbxztc 51CTO博客,原文链接:http://blog.51cto.com/hbxztc/1910475,如需转载请自行联系原作者





相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
关系型数据库 数据库 PostgreSQL
|
SQL 关系型数据库 MySQL
Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本
Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本
1325 1
Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本
LXJ
|
安全 关系型数据库 Linux
PostgreSQL通过pg_upgrade进行大版本升级
PostgreSQL通过pg_upgrade进行大版本升级
LXJ
2927 0
|
存储 安全 Cloud Native
云栖重磅发布 - AnalyticDB PostgreSQL 7.0版本,企业级分析能力升级!
云原生数据仓库AnalyticDB PostgreSQL(简称ADB PG) 7.0版本发布公开测试。该版本着重于提升企业级分析能力,安全管理,执行性能等方面,整体性价比显著提升!
云栖重磅发布 - AnalyticDB PostgreSQL 7.0版本,企业级分析能力升级!
|
存储 监控 安全
Retool 如何升级主应用 4TB 的 PostgreSQL 数据库
本文最初发布于 Retool 官方博客。
161 0
|
SQL 关系型数据库 Java
AnalyticDB PostgreSQL新功能发布,内核及SQL诊断与优化能力双双升级
新版本内核提升排序及查询能力,支持增量自动排序等核心功能。 控制台进一步优化智能诊断与能力服务,提供SQL分布统计及执行计划分析
AnalyticDB PostgreSQL新功能发布,内核及SQL诊断与优化能力双双升级
|
SQL 存储 网络协议
RDS PostgreSQL一键大版本升级技术解密
内容简要: 一、PostgreSQL行业位置 二、PostgreSQL版本升级背景 三、PostgreSQL版本升级解密 四、PostgreSQL版本升级成果
1736 0
RDS PostgreSQL一键大版本升级技术解密
|
SQL 自然语言处理 搜索推荐
文明的升级依靠工具的升级:揭秘下一代云数据库引擎MyBase for PostgreSQL
在MyBase中,PG引擎除了包含RDS所有的能力,还包含GIS、分词搜索、精准营销、复杂SQL、Oracle兼容扩展和图像识别等核心能力。
479 0
文明的升级依靠工具的升级:揭秘下一代云数据库引擎MyBase for PostgreSQL
|
运维 分布式计算 Cloud Native
阿里云新品发布会周刊第90期 丨 云数据库PostgreSQL版重磅升级开年发布会
3月3日,PostgreSQL社区每年发布一个大版本,就是为了让用户享受到PG 大版本带来的功能和性能方面的提升。 本次直播,阿里云高级产品经理德哥将重磅发布云数据库PostgreSQL 13大版本,并介绍大版本一键升级等功能。
932 0
阿里云新品发布会周刊第90期 丨  云数据库PostgreSQL版重磅升级开年发布会
|
SQL 存储 固态存储
3月3日 | 云数据库PostgreSQL版重磅升级开年发布会
阿里云RDS PostgreSQL是一款兼容开源PostgreSQL的全托管云数据库产品,自2015年首次发布以来,根据用户需求不断升级迭代,已支持9.4、10、11、12等多个版本,覆盖了高可用版、基础版、只读实例等多种形态,数据存储覆盖了本地SSD、SSD云盘、 ESSD云盘等多种形态。最高配置可达104核,768G内存,32TB,100万IOPS。
731 0
3月3日 | 云数据库PostgreSQL版重磅升级开年发布会