PG从小白到专家 - Part 11:PostgreSQL控制文件作用与管理

本文涉及的产品
云原生数据库 PolarDB MySQL 版,通用型 2核4GB 50GB
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
简介: PG从小白到专家 - Part 11:PostgreSQL控制文件作用与管理

PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。

Part 11:PostgreSQL控制文件作用与管理

内容1:PostgreSQL控制文件位置

内容2:PostgreSQL控制文件内容

内容3:PostgreSQL控制文件维护

内容4:PostgreSQL控制文件备份

内容5:PostgreSQL控制文件恢复

11.1、控制文件位置

控制文件位置与大小

逻辑位置:存放在pg_global表空间中

物理位置与名字:$PGDATA/global/pg_control

控制文件的物理大小是8K

控制文件内容尽量保持小于512个字节

11.2、控制文件内容

· initdb时生成的静态信息

pg_control version number: 1201

Catalog version number: 201909212

Database system identifier: 6744130188358323871

Maximum data alignment: 8

Database block size: 8192

Blocks per segment of large relation: 131072

WAL block size: 16384

Bytes per WAL segment: 16777216

Maximum length of identifiers: 64

Maximum columns in an index: 32

Maximum size of a TOAST chunk: 1996

Date/time type storage: 64-bit integers

Float4 argument passing: by value

Float8 argument passing: by value

· postgresql.conf中的配置信息

wal_level setting: replica

wal_log_hints setting: on

max_connections setting: 1000

max_worker_processes setting: 8

max_wal_senders setting: 10

max_prepared_xacts setting: 0

max_locks_per_xact setting: 64

track_commit_timestamp setting: off

· write-ahead logging以及checkpoint的动态信息

Latest checkpoint location: 2E/CD32D270

Latest checkpoint's REDO location: 2E/CD32D270

Latest checkpoint's REDO WAL file: 000000110000002E000000CD

Latest checkpoint's TimeLineID: 17

Latest checkpoint's PrevTimeLineID: 17

Latest checkpoint's full_page_writes: on

Latest checkpoint's NextXID: 0:538902

Latest checkpoint's NextOID: 385511

Latest checkpoint's NextMultiXactId: 5

……

Time of latest checkpoint: Sat 18 Jul 2020 10:11:14 PM EDT

Fake LSN counter for unlogged rels: 0/3E8

Backup start location: 0/0

Backup end location: 0/0

End-of-backup record required: no

11.3、控制文件维护

1、固定部分

初始化数据库时产生,固定不变

2、有些信息随时更新

如果发生检查点、备份、日志切换等操作,则自动更新

3、postgres.conf相关参数被更新

如果配置文件中重要的相关参数被修改,则也会自动更新

4、数据库备份时会一起备份

5、不能手动修改该文件

6、启动和恢复数据库时需要,当前没有避免发生单一故障点而设计的保护策略

11.4、控制文件备份

备份方式(与数据库备份一起备份,一起恢复,不能单独备份)

1、tar命令

tar -jcv -f baseline.tar.bz2 $PGDATA

2、pg_basebackup命令

pg_basebackup -D bk1 -Ft -z –P

3、pg_rman命令

pg_rman backup --backup-mode=full -B /home/postgres/pg_rman_bk/ -C -P

11.5、控制文件恢复

重建控制文件

Pg10版本以前版本使用pg_resetxlog工具

Pg10及以后版本使用pg_resetwal工具

pg_resetwal工具需要下面四个参数:

· 1、

-l XLOGFILE force minimum WAL starting location for new transaction log

( XLOGFILE强制新事务日志的最小WAL起始位置)

定位办法:pg_wal下面创建的最大的日志文件,编号+1

cd /usr/local/pg12.2/data/pg_wal/

ll

-rw------- 1 postgres postgres 270 Mar 21 09:40 00000010.history

-rw------- 1 postgres postgres 16777216 Jul 19 06:19 0000001100000038000000C4

-rw------- 1 postgres postgres 16777216 Jul 19 06:16 0000001100000038000000C5

-rw------- 1 postgres postgres 16777216 Jul 19 06:17 0000001100000038000000C6

-rw------- 1 postgres postgres 16777216 Jul 19 06:17 0000001100000038000000C7

确定-l 的参数值为:

-l 0000001100000038000000C8

· 2、

-O OFFSET set next multitransaction offset

在pg_multixact/members下面,取最大值加1然后乘以65536.转换成16进制为100000,然后末尾添加4个0

-O=0x1000000000

步骤:

1、进入相应目录

cd $PGDATA/pg_multixact/members/

2、查看文件

ll-rwxr-x--- 1 postgres postgres 8192 Jul 18 22:11 0000

3、计算结果

-O=0x1000000000

· 3、

-m =MXID,MXID set next and oldest multitransaction ID

在pg_multixact/offsets下面,找到最大的文件编号,+1 后面跟上4个0

如:0000

-m =0x00010000,0x00010000

步骤:1、进入相应目录

cd $PGDATA/pg_multixact/offsets

2、查看文件

-rwxr-x--- 1 postgres postgres 8192 Jul 19 05:57 0000

3、计算结果

-m=0x00010000,0x00010000

· 4、

-x XID set next transaction ID

在pg_xact下面,找到最大的文件编号,+1 后面跟上5个0

如:0000

-x = 0x000100000

步骤:1、进入相应目录

cd $PGDATA/pg_xact/

2、查看当前文件

lltotal 140-rwxr-x--- 1 postgres postgres 139264 Jul 18 23:21 0000

3、计算-x值

-x=0x000100000

执行重建控制文件语句:

cd $PGDATA/global

touch pg_control

pg_resetwal -l 0000001100000038000000CC -O 0x1000000000 \

-m 0x00010000,0x00010000 -x 0x000100000 -f $PGDATA

pg_controldata

启动数据库:

pg_ctl start

以上就是Part 11 - PostgreSQL控制文件作用与管理 的内容,欢迎进群一起探讨交流,钉钉交流群:35,82,24,60,钉钉群有专门讲解公开课

往期课程及视频,联系cuug咨询老师

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
7月前
|
安全 关系型数据库 MySQL
《MySQL 简易速速上手小册》第4章:数据安全性管理(2024 最新版)
《MySQL 简易速速上手小册》第4章:数据安全性管理(2024 最新版)
100 3
|
7月前
|
运维 监控 安全
云HIS医疗管理系统源码——技术栈【SpringBoot+Angular+MySQL+MyBatis】
云HIS系统采用主流成熟技术,软件结构简洁、代码规范易阅读,SaaS应用,全浏览器访问前后端分离,多服务协同,服务可拆分,功能易扩展;支持多样化灵活配置,提取大量公共参数,无需修改代码即可满足不同客户需求;服务组织合理,功能高内聚,服务间通信简练。
231 4
|
5天前
|
Oracle 安全 关系型数据库
【赵渝强老师】PostgreSQL的参数文件
PostgreSQL数据库的四个主要参数文件包括:`postgresql.conf`(主要配置文件)、`pg_hba.conf`(访问控制文件)、`pg_ident.conf`(用户映射文件)和`postgresql.auto.conf`(自动保存修改后的参数)。视频讲解和详细说明帮助理解各文件的作用。
58 19
|
17天前
|
存储 关系型数据库 数据库
【赵渝强老师】PostgreSQL的控制文件
本文介绍了PostgreSQL数据库的物理存储结构,重点解析了控制文件,包括其重要性及如何通过`pg_controldata`命令查看控制文件内容。控制文件记录了数据库运行的关键信息,如数据库状态、WAL位置等。
70 14
|
23天前
|
存储 关系型数据库 数据库
【赵渝强老师】PostgreSQL的数据文件
PostgreSQL的物理存储结构主要包括数据文件、日志文件等。数据文件按oid命名,超过1G时自动拆分。通过查询数据库和表的oid,可定位到具体的数据文件。例如,查询数据库oid后,再查询特定表的oid及relfilenode,即可找到该表对应的数据文件位置。
|
5月前
|
关系型数据库 分布式数据库 数据库
PolarDB产品使用问题之如何进行PostgreSQL(简称PG)的全量和增量备份管理
PolarDB产品使用合集涵盖了从创建与管理、数据管理、性能优化与诊断、安全与合规到生态与集成、运维与支持等全方位的功能和服务,旨在帮助企业轻松构建高可用、高性能且易于管理的数据库环境,满足不同业务场景的需求。用户可以通过阿里云控制台、API、SDK等方式便捷地使用这些功能,实现数据库的高效运维与持续优化。
|
5月前
|
存储 关系型数据库 MySQL
MySQL数据库开发进阶:精通数据库表的创建与管理22
【7月更文挑战第22天】数据库的创建与删除,数据表的创建与管理
53 1
|
6月前
|
SQL 关系型数据库 MySQL
MySQL数据库——SQL(4)-DCL(管理用户、权限控制)
MySQL数据库——SQL(4)-DCL(管理用户、权限控制)
59 1
|
7月前
|
存储 数据可视化 关系型数据库
【MySQL进阶之路 | 基础篇】创建和管理数据库
【MySQL进阶之路 | 基础篇】创建和管理数据库
|
6月前
|
SQL 关系型数据库 MySQL
MySQL管理与连接
MySQL管理与连接