postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份

本文涉及的产品
云原生数据库 PolarDB MySQL 版,Serverless 5000PCU 100GB
云数据库 RDS SQL Server,独享型 2核4GB
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介: postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份


PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。


第36讲:PostgreSQL逻辑备份


第36讲:12月02日(周六)19:30-20:30,往期公开课的文档及视频,联系CUUG


内容1:逻辑备份概述

内容2:pg_dump使用

内容3:pg_dumpall使用

内容4:copy使用


PG导出导入工具


PG导出导入概述

· 可以使用这些实用程序执行以下操作:

归档历史数据

保存表定义以防止用户出错

在计算机和数据库之间或PostgreSQL服务器的不同版本之间移动数据

在数据库之间传输数据


调用导出和导入程序的方法

命令行接口

其它管理工具


导出模式

· pg_dump只能备份单个数据库,不会导出角色和表空间相关的信息,而且恢复的时候需要创建空数据库。

· pg_dumpall可以备份所有数据库,并且备份角色、表空间。

-F c 备份为二进制格式, 压缩存储. 并且可被 pg_restore 用于精细还原。

-F p 备份为文本, 大库不推荐。


调用pg_dump

语法:

pg_dump [选项]... [数据库名字]

示例:

pg_dump testdb > testdb.sql

pg_dump -F c -f testdb.dmp -C -E UTF8 -h 127.0.0.1 -U postgres testdb

pg_dump -F p -f testdb.sql -C -E UTF8 -h 127.0.0.1 -U postgres testdb


逻辑恢复

· 恢复顺序

1.创建新表

2.导入数据

3.建立索引

4.触发器已导入

5.在新表上启用完整性约束

6.创建函数


· 恢复数据

文本格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

psql new_db1 < testdb.sql

二进制格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

pg_restore -d new_db1 testdb.dmp


二进制备份实现精细恢复

· 利用toc文件实现精细恢复

1、根据二进制备份文件生成 toc 文件

pg_restore -l -f testdb.toc testdb.dmp

2、修改 toc 文件,用‘;’号注释掉不用还原的内容

203; 1259 40996 TABLE public dept postgres

204; 1259 41001 TABLE public emp postgres

;202; 1259 16391 TABLE public t1 postgres

2840; 0 40996 TABLE DATA public dept postgres

2841; 0 41001 TABLE DATA public emp postgres

;2839; 0 16391 TABLE DATA public t1 postgres

3、以toc文件做恢复

pg_restore -F c -L testdb.toc -d testdb testdb.dmp


其它导出导入技巧

· 利用管道符实现各种导出导入

导出并且压缩

pg_dump testdb |gzip testdb.sql

解压并且导入,压缩文件不变,,导入到testdb数据库:

gunzip -c testdb.sql.gz |psql testdb

导出后直接进行恢复,文件不落地,把testdb数据库的表导入到testdb1:

pg_dump testdb| psql testdb1

并行导出与导入

pg_dump -Fd -j4 -f testdb.p.dump testdb

pg_restore -d testdb1 -j4 testdb.p.dump


其它备份恢复技巧

· 备份指定/排除的表

如果只想导出指定的表数据,可以使用-t参数,表名需要用两个双引号概括起来。

pg_dump -t ""departments"" -t ""employees"" testdb > testdb.sql

导出排除指定的表的数据库

pg_dump -d testdb -T ""emp"" > testdb_ex_emp.sql


使用pg_dump实现主机间数据库间迁移数据

· 文件不落地,实现数据库迁移

1、配置两个数据库之间的信任关系(必须)

host all all 192.168.18.0/24 trust

2、在数据库之间进行某个数据库迁移

pg_dump -h pg1 -p 1922 -U postgres testdb|psql -h pg2 -p 5432 -U postgres testdb

3、迁移所有的数据库到目标数据库

pg_dumpall -h pg1 -p 1922 -U postgres |psql -h pg2 -p 5432 -U postgres

注意:

1、PG数据库之间迁移无需配置dblink,只要指定主机名和端口即可。

2、由于用的是管道符,所以必须配置两个数据库远程登录信任关系。

3、迁移时两个数据库必须要有相同的表空间,需要提前创建。


copy概述

· 实现表与文件之间的交互

copy 命令用于数据库中表与操作系统文件(和标准输出、标准输入)之间的相互拷贝,可以由表至文件,也可以由文件至表。

使用copy实现数据库表和文本文件之间数据的迁移,非常方便,比Oracle的sqlloader易用性好。


copy语法

· 语法

文件到表

COPY table_name [ ( column ...] ) ]

FROM { 'filename' | command' | STDIN }

[ [ WITH ] ( option [, ] ) ]

表到文件

COPY { table_name column_name [, ...] ) ] | ( query ) }

TO { 'filename' | PROGRAM 'command' | STDOUT }

[ [ WITH ] ( option [, ...] ) ]


应用案例

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

1 a

2 b

3 c

逗号作为分隔符:

1,a,"I am students"

2,b,"I am teacher"

3,c,"I am boss"

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name from /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name from /home/postgres/tab.csv with csv;

· 表到文件

表到文件时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name to /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name to /home/postgres/tab.csv with csv;


CUUG PostgreSQL技术大讲堂系列公开课,往期视频及文档,请联系CUUG客服。

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
2月前
|
存储 关系型数据库 Java
polardb有没有搞过pg 全量及增量备份管理的
【1月更文挑战第3天】【1月更文挑战第11篇】 polardb有没有搞过pg 全量及增量备份管理的
23 1
|
2月前
|
关系型数据库 数据库 PostgreSQL
PostgreSQL从入门到精通 - 第40讲:数据库不完全恢复
PostgreSQL从入门到精通 - 第40讲:数据库不完全恢复
119 1
|
3月前
|
关系型数据库 数据库 PostgreSQL
postgresql|【基于pg_basebackup命令的归档备份和恢复---热备冷恢复方式】
postgresql|【基于pg_basebackup命令的归档备份和恢复---热备冷恢复方式】
27 0
|
26天前
|
SQL 关系型数据库 分布式数据库
PolarDB for PostgreSQL逻辑复制问题之逻辑复制冲突如何解决
PolarDB for PostgreSQL是基于PostgreSQL开发的一款云原生关系型数据库服务,它提供了高性能、高可用性和弹性扩展的特性;本合集将围绕PolarDB(pg)的部署、管理和优化提供指导,以及常见问题的排查和解决办法。
|
26天前
|
Kubernetes 关系型数据库 分布式数据库
PolarDB for PostgreSQL备份问题之备份损坏如何解决
PolarDB for PostgreSQL是基于PostgreSQL开发的一款云原生关系型数据库服务,它提供了高性能、高可用性和弹性扩展的特性;本合集将围绕PolarDB(pg)的部署、管理和优化提供指导,以及常见问题的排查和解决办法。
|
1月前
|
SQL 关系型数据库 数据库
PostgreSQL从小白到高手教程 - 第44讲:pg流复制部署
PostgreSQL技术大讲堂 - 第44讲:pg流复制部署
35 0
|
2月前
|
Oracle 关系型数据库 数据库
PostgreSQL从入门到精通教程 - 第42讲:pg_rman部署与使用
PostgreSQL从入门到精通教程 - 第42讲:pg_rman部署与使用
42 1
|
2月前
|
关系型数据库 数据库 PostgreSQL
PostgreSQL从小白到高手教程 - 第41讲:postgres表空间备份与恢复
PostgreSQL从小白到高手教程 - 第41讲:postgres表空间备份与恢复
123 1
|
2月前
|
弹性计算 关系型数据库 MySQL
设置PolarDB MySQL版集群IP白名单教程
设置PolarDB MySQL版集群IP白名单教程 内容: 在创建PolarDB MySQL版数据库集群后,为了保证集群的安全性,您需要设置集群的IP白名单。只有添加到白名单中的IP地址或安全组中的ECS实例才能访问该集群。本文将详细介绍如何设置IP白名单。
107 2
|
3月前
|
关系型数据库 数据库 PostgreSQL
postgresql|数据库|恢复备份的时候报错:pg_restore: implied data-only restore的处理方案
postgresql|数据库|恢复备份的时候报错:pg_restore: implied data-only restore的处理方案
44 0

相关产品

  • 云原生数据库 PolarDB