PolarDB for PostgreSQL 开源产品 FAQ

本文涉及的产品
云原生数据库 PolarDB MySQL 版,Serverless 5000PCU 100GB
简介: 常见问答合集

一、部署使用类


1. 是否有提供docker镜像

官方暂时没有提供docker镜像,但用户可以通过命令一键构建docker镜像。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-using-docker-image


2. 默认ssh 端口非22 的时候,如何配置

目前程序中没有针对修改ssh端口的配置,建议将ssh端口修改回默认22


3. 有没有提供相关配置列表,可以跑出一定性能的benchmark结果

暂时没有。不同的硬件下会产生不同的benchmark结果。可以搭建polardb数据库,使用pgbench作为benchamark工具进行性能测试。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL/blob/master/doc/polardb/benchmark.md


4. polardb是否有单点故障(搭建分布式的polardb

没有。通过onekey.sh all或者pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令部署得到的polardb默认是有三节点部署在同一台物理机器上的。通过将 polardb_paxos.conf配置文件中localhost改为对应的机器ip,就可以避免单点故障。(注意三台机器的ssh需要被打通)

更改文件示例:

datanodeMasterServers=(localhost) # none means this master is not available.
datanodeSlaveServers=(localhost) # value none means this slave is not available
datanodeLearnerServers=(localhost) # value none means this learner is not available

——>

datanodeMasterServers=(Server1 IP) # none means this master is not available.
datanodeSlaveServers=(Server2 IP) # value none means this slave is not available
datanodeLearnerServers=(Server3 IP) # value none means this learner is not available


5. XPaxos是否已经完全开源,包含了一个multi-paxos系统的所有特性

是的,已经开源。参考commit "3b2a3a8cea2a872c0179e8d0ebe50a482420bb0a"


6. 使用pgxc_ctl时报错

使用pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令时报错

答:需要使用非root用户进行部署。pgxc_ctl会通过scp的方式在多台机器间分发二进制文件等,所以需要对涉及到的机器打通ssh。可以使用ssh-copy-id命令,如"ssh-copy-id username@192.168.2.156"


7. 使用pgxc_ctl时报错

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf init all初始化集群时,报错如下

答: 需要配置环境变量

vi ~/.bashrc
export PATH="$HOME/polardb/polardbhome/bin:$PATH"
export LD_LIBRARY_PATH="$HOME/polardb/polardbhome/lib:$LD_LIBRARY_PATH"

更多内容参考:https://github.com/alibaba/PolarDB-for-PostgreSQL/#previous-preparation


8. PolarDB-for-PostgreSQL的语法兼容性

语法文档 除了https://github.com/alibaba/PolarDB-for-PostgreSQL,还有其它地方有吗?

答:目前版本polardb for postgresql兼容社区postgresql语法,在语法上可以认为和社区postgresql相同。


9. PolarDB-for-Postgresql开源版本目前只支持单机版吗?

是的,现在是复制高可用集群。数据库本身是单机形态。后续会发布集群版,请关注我们的github动态。


二、编译类


1. docker build失败

使用docker build -t polardb-for-postgresql -f ./docker/Dockerfile . 命令报错

[ 80%] [ 80%] Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaUtilityTargetGenerator.cxx.o

Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaNormalTargetGenerator.cxx.o

�[91mg++: fatal error: Killed signal terminated program cc1plus

compilation terminated.

这是编译安装cmake时的报错。可能是由内存不足引起,可以尝试扩大虚拟机内存。

可以google搜索“Killed signal terminated program cc1plus”尝试各种方法来解决。


2. onekey.sh all 编译报错

执行onekey.sh all时,报错:

checking for Python.h... no

configure: error: header file  is required for Python

答:在执行onekey.sh前,需要先安装python


3. gcc 10.2.0编译报错

执行build.sh报错

/root/PolarDB-for-PostgreSQL/src/backend/polar_dma/libconsensus/dependency/easy/src/thread/easy_uthread.c:266:17: error: ‘SIG_BLOCK’ undeclared (first use in this function)

答:这是gcc版本的问题。已经增加了gcc 10版本下的支持。另外在gcc 4.8或者7.2下也可以正确编译。


4. 编译时报错 link error with SSL_* symbols

编译报错如下:

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_num_locks'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_cleanup_all_ex_data'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_mem_leaks_fp'

collect2: error: ld returned 1 exit status

make[2]: *** [Makefile:71: postgres] Error 1

make[2]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src/backend'

make[1]: *** [Makefile:42: all-backend-recurse] Error 2

make[1]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src'

make: *** [GNUmakefile:11: all-src-recurse] Error 2

答: 在编译前需要安装openssl。需要安装的其他内容参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-from-source-code


5. macOS上,PGSPI函数是在哪个so里面实现的?

PGSPI函数在 src/backend/executor/spi.c 中。属于内核模块。并非编译成so


三、架构类


1. 是否会写一些high-level的设计文档

文档在不断完善补充中。目前已有的可以参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


2. 相对于pg的代码改动点有哪些

polardb会逐步开源新特性。目前已经开源的特性主要包括HA增强(基于paxosHA和基于streamingHA),CTS等特性。欢迎关注后续即将发布的各项增强功能。


3. 后续有计划完整开源吧?想多机、 多DATANODE部署一下

有的,可以看一下roadmap的文档。文档地址: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


4. 目前开源的版本基本pg哪个版本开发的

基于postgresql 11.2 版本开发


5. 开源版本最大仅支持三个节点的集群吗

可以支持多个副本部署。目前开源的版本本质上是多副本,只有一个计算节点,所以可以在多台机器上部署多个副本,通常三副本就能满足绝大部分场景的可靠性需求。后续会开源集群版本,提供多个计算节点,敬请关注。


6. 这个集群是类似oracle rac 这种share disk的架构吗?

不是的。目前开源版本是单机数据库,提供了多个副本,每个副本使用独立的磁盘,并非shard disk


四、运维操作类

1. autovacuum操作一月被触发一次, 每次触发的时候数据库就慢

autovacuum触发频率可以由配置参数决定。vacuum的目的在于回收page中的dead tuplefreeze transaction xidvacuum时会产生IO,也会对表加ShareUpdateExclusiveLock锁。所以会对数据库有性能影响。

更多原理和细节可以参考官方文档: https://www.postgresql.org/docs/11/runtime-config-autovacuum.html

https://www.postgresql.org/docs/11/routine-vacuuming.html


2. pg12 主从+ patroni2.1 patroni leader 切换之后,pg 主从丢失这个是什么情况?

正常时:

patroni 切换leader 之后, 在执行查看主从命令,不再显示。

原因:

解决patroni leader 故障切换之后,pg 主从也发生了切换。


3. 长事务导致autovacuum不能推进oldest xmin解决方法

需要terminate该长事务。可以使用命令 select pg_terminate_backend($backend_pid);


4. 有什么数据库,对于非固定列的数据,存储与查询还有统计支持比较好的?

可以看下HBase 或者 MongoDB


5. 开源版的polardb支持全文检索吗?性能如何?

全文检索是社区postgresql原生提供的能力,开源版本postgresql for polardb继承了这个能力,但没有进行开发增强。


6. pglogical 插件比原生的逻辑复制有什么优势?

pglogical是一个独立插件,原理与原生的逻辑复制是一样的,pglogical有更加强大的冲突处理能力。具体可以参考:https://www.2ndquadrant.com/en/resources/pglogical/


7. pg 的高可用 在生产环境有在使用pgpool的吗?

pgpool可以使用。也可以看下Patroni是否满足需要。


8. PG性能抖动怎么记录现场?日志记录的执行计划只能看到执行计划突然很慢,1000次只有1次很慢。

可以尝试下auto_explain。具体可以参考 https://github.com/digoal/blog/blob/master/202106/20210621_03.md


9. 阿里云的pg支持btree_gin之类的extension?

支持。


10. postgresql内置的copyfrom函数为什么拷贝效率那么高

copy在多个方面提高了拷贝效率。具体可以参考 https://stackoverflow.com/questions/46715354/how-does-copy-work-and-why-is-it-so-much-faster-than-insert


11. pg vacuum analyze 大表的时候,会写很多wal日志吗

如果vacuum修改了page,就会产生wal日志。产生的日志量取决于对表的修改量大小,跟表的大小并没有直接关系。


12. 备份pg表时,为何主键和sequence 也被备份了

物理备份本来就含了主键和序列


13. 在pg里面,我一个用户要授予对所有数据库只有查询和修改,但是没有删除权限. 这要怎么实现,我现在很多库我不想一个一个库去授权

数据库没有提供内置的功能。可以自行编写脚本来对所有数据库进行授权。授权和撤销可以使用 grantrevoke命令。参考 https://www.postgresql.org/docs/11/sql-grant.html

https://www.postgresql.org/docs/11/sql-revoke.html

 

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
17天前
|
关系型数据库 Serverless 分布式数据库
【公测】PolarDB PostgreSQL版Serverless功能免费使用​!
【公测】PolarDB PostgreSQL版Serverless功能免费使用​,公测于2024年3月28日开始,持续三个月,公测期间可以免费使用!
|
21天前
|
关系型数据库 分布式数据库 数据库
成都晨云信息技术完成阿里云PolarDB数据库产品生态集成认证
近日,成都晨云信息技术有限责任公司(以下简称晨云信息)与阿里云PolarDB PostgreSQL版数据库产品展开产品集成认证。测试结果表明,晨云信息旗下晨云-站群管理系统(V1.0)与阿里云以下产品:开源云原生数据库PolarDB PostgreSQL版(V11),完全满足产品兼容认证要求,兼容性良好,系统运行稳定。
|
1月前
|
关系型数据库 分布式数据库 数据库
PolarDB PostgreSQL版:Oracle兼容的高性能数据库
PolarDB PostgreSQL版是一款高性能的数据库,具有与Oracle兼容的特性。它采用了分布式架构,可以轻松处理大量的数据,同时还支持多种数据类型和函数,具有高可用性和可扩展性。它还提供了丰富的管理工具和性能优化功能,为企业提供了可靠的数据存储和处理解决方案。PolarDB PostgreSQL版在数据库领域具有很高的竞争力,可以满足各种企业的需求。
|
2月前
|
关系型数据库 分布式数据库 PolarDB
电子书阅读分享《PolarDB开发者大会:拥抱开源 | 成就开源PolarDB开发者大会:拥抱开源 | 成就开源》
电子书阅读分享《PolarDB开发者大会:拥抱开源 | 成就开源PolarDB开发者大会:拥抱开源 | 成就开源》
18 3
|
1月前
|
关系型数据库 Serverless 分布式数据库
PolarDB PostgreSQL版Serverless功能上线公测啦,公测期间免费使用!
Serverless数据库能够使得数据库集群资源随客户业务负载动态弹性扩缩,将客户从复杂的业务资源评估和运维工作中解放出来。PolarDB PostgreSQL版 Serverless提供了CPU、内存、存储、网络资源的实时弹性能力,构建计算与存储分离架构下的 PolarDB PostgreSQL版产品新形态。
|
6天前
|
运维 关系型数据库 分布式数据库
「合肥 * 讯飞」4 月 19 日 PolarDB 开源数据库沙龙,报名中!
4月19日周五,PolarDB开源社区联合科大讯飞共同举办开源数据库技术沙龙,本次沙龙我们邀请了众多数据库领域的专家,期待大家的参与!
「合肥 * 讯飞」4 月 19 日 PolarDB 开源数据库沙龙,报名中!
|
1月前
|
关系型数据库 Serverless 分布式数据库
PolarDB的Serverless能力与同类型产品的对比
【2月更文挑战第21天】PolarDB的Serverless能力与同类型产品的对比
18 2
|
1月前
|
关系型数据库 分布式数据库 PolarDB
稳健前行:PolarDB开源社区调研开始啦!
PolarDB开源社区调研持续进行中!我们会重视每一位开发者的反馈,对提供建设性建议的开发者将会提供精美周边礼品!欢迎大家参与!
|
2月前
|
SQL 关系型数据库 分布式数据库
在PolarDB for PostgreSQL中,你可以使用LIKE运算符来实现类似的查询功能,而不是使用IF函数
在PolarDB for PostgreSQL中,你可以使用LIKE运算符来实现类似的查询功能,而不是使用IF函数
42 7
|
2月前
|
关系型数据库 分布式数据库 数据库
云原生数据库PolarDB快速入门实验
【2月更文挑战第2天】很基础的PolarDB入门操作实验考试,假期闲着无聊考着玩玩。云原生数据库 PolarDB MySQL 版是阿里云自研产品,100%兼容 MySQL。PolarDB产品具有多主多写、多活容灾、HTAP 等特性,交易性能最高可达开源数据库的6倍,分析性能最高可达开源数据库的400倍,TCO 低于自建数据库50%。

热门文章

最新文章

相关产品

  • 云原生数据库 PolarDB