PolarDB for PostgreSQL 开源产品 FAQ

本文涉及的产品
云原生数据库 PolarDB MySQL 版,通用型 2核4GB 50GB
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
简介: 常见问答合集

一、部署使用类


1. 是否有提供docker镜像

官方暂时没有提供docker镜像,但用户可以通过命令一键构建docker镜像。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-using-docker-image


2. 默认ssh 端口非22 的时候,如何配置

目前程序中没有针对修改ssh端口的配置,建议将ssh端口修改回默认22


3. 有没有提供相关配置列表,可以跑出一定性能的benchmark结果

暂时没有。不同的硬件下会产生不同的benchmark结果。可以搭建polardb数据库,使用pgbench作为benchamark工具进行性能测试。具体参考:

https://github.com/alibaba/PolarDB-for-PostgreSQL/blob/master/doc/polardb/benchmark.md


4. polardb是否有单点故障(搭建分布式的polardb

没有。通过onekey.sh all或者pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令部署得到的polardb默认是有三节点部署在同一台物理机器上的。通过将 polardb_paxos.conf配置文件中localhost改为对应的机器ip,就可以避免单点故障。(注意三台机器的ssh需要被打通)

更改文件示例:

datanodeMasterServers=(localhost) # none means this master is not available.
datanodeSlaveServers=(localhost) # value none means this slave is not available
datanodeLearnerServers=(localhost) # value none means this learner is not available

——>

datanodeMasterServers=(Server1 IP) # none means this master is not available.
datanodeSlaveServers=(Server2 IP) # value none means this slave is not available
datanodeLearnerServers=(Server3 IP) # value none means this learner is not available


5. XPaxos是否已经完全开源,包含了一个multi-paxos系统的所有特性

是的,已经开源。参考commit "3b2a3a8cea2a872c0179e8d0ebe50a482420bb0a"


6. 使用pgxc_ctl时报错

使用pgxc_ctl -c $HOME/polardb/polardb_paxos.conf prepare standalone命令时报错

答:需要使用非root用户进行部署。pgxc_ctl会通过scp的方式在多台机器间分发二进制文件等,所以需要对涉及到的机器打通ssh。可以使用ssh-copy-id命令,如"ssh-copy-id username@192.168.2.156"


7. 使用pgxc_ctl时报错

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf init all初始化集群时,报错如下

答: 需要配置环境变量

vi ~/.bashrc
export PATH="$HOME/polardb/polardbhome/bin:$PATH"
export LD_LIBRARY_PATH="$HOME/polardb/polardbhome/lib:$LD_LIBRARY_PATH"

更多内容参考:https://github.com/alibaba/PolarDB-for-PostgreSQL/#previous-preparation


8. PolarDB-for-PostgreSQL的语法兼容性

语法文档 除了https://github.com/alibaba/PolarDB-for-PostgreSQL,还有其它地方有吗?

答:目前版本polardb for postgresql兼容社区postgresql语法,在语法上可以认为和社区postgresql相同。


9. PolarDB-for-Postgresql开源版本目前只支持单机版吗?

是的,现在是复制高可用集群。数据库本身是单机形态。后续会发布集群版,请关注我们的github动态。


二、编译类


1. docker build失败

使用docker build -t polardb-for-postgresql -f ./docker/Dockerfile . 命令报错

[ 80%] [ 80%] Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaUtilityTargetGenerator.cxx.o

Building CXX object Source/CMakeFiles/CMakeLib.dir/cmNinjaNormalTargetGenerator.cxx.o

�[91mg++: fatal error: Killed signal terminated program cc1plus

compilation terminated.

这是编译安装cmake时的报错。可能是由内存不足引起,可以尝试扩大虚拟机内存。

可以google搜索“Killed signal terminated program cc1plus”尝试各种方法来解决。


2. onekey.sh all 编译报错

执行onekey.sh all时,报错:

checking for Python.h... no

configure: error: header file  is required for Python

答:在执行onekey.sh前,需要先安装python


3. gcc 10.2.0编译报错

执行build.sh报错

/root/PolarDB-for-PostgreSQL/src/backend/polar_dma/libconsensus/dependency/easy/src/thread/easy_uthread.c:266:17: error: ‘SIG_BLOCK’ undeclared (first use in this function)

答:这是gcc版本的问题。已经增加了gcc 10版本下的支持。另外在gcc 4.8或者7.2下也可以正确编译。


4. 编译时报错 link error with SSL_* symbols

编译报错如下:

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_num_locks'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_cleanup_all_ex_data'

/usr/bin/ld: ../../src/backend/polar_dma/lib//libpolar_consensus_wrapper.so: undefined reference to `CRYPTO_mem_leaks_fp'

collect2: error: ld returned 1 exit status

make[2]: *** [Makefile:71: postgres] Error 1

make[2]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src/backend'

make[1]: *** [Makefile:42: all-backend-recurse] Error 2

make[1]: Leaving directory '/home/ajung/src/PolarDB-for-PostgreSQL/src'

make: *** [GNUmakefile:11: all-src-recurse] Error 2

答: 在编译前需要安装openssl。需要安装的其他内容参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#deployment-from-source-code


5. macOS上,PGSPI函数是在哪个so里面实现的?

PGSPI函数在 src/backend/executor/spi.c 中。属于内核模块。并非编译成so


三、架构类


1. 是否会写一些high-level的设计文档

文档在不断完善补充中。目前已有的可以参考: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


2. 相对于pg的代码改动点有哪些

polardb会逐步开源新特性。目前已经开源的特性主要包括HA增强(基于paxosHA和基于streamingHA),CTS等特性。欢迎关注后续即将发布的各项增强功能。


3. 后续有计划完整开源吧?想多机、 多DATANODE部署一下

有的,可以看一下roadmap的文档。文档地址: https://github.com/alibaba/PolarDB-for-PostgreSQL#architecture--roadmap


4. 目前开源的版本基本pg哪个版本开发的

基于postgresql 11.2 版本开发


5. 开源版本最大仅支持三个节点的集群吗

可以支持多个副本部署。目前开源的版本本质上是多副本,只有一个计算节点,所以可以在多台机器上部署多个副本,通常三副本就能满足绝大部分场景的可靠性需求。后续会开源集群版本,提供多个计算节点,敬请关注。


6. 这个集群是类似oracle rac 这种share disk的架构吗?

不是的。目前开源版本是单机数据库,提供了多个副本,每个副本使用独立的磁盘,并非shard disk


四、运维操作类

1. autovacuum操作一月被触发一次, 每次触发的时候数据库就慢

autovacuum触发频率可以由配置参数决定。vacuum的目的在于回收page中的dead tuplefreeze transaction xidvacuum时会产生IO,也会对表加ShareUpdateExclusiveLock锁。所以会对数据库有性能影响。

更多原理和细节可以参考官方文档: https://www.postgresql.org/docs/11/runtime-config-autovacuum.html

https://www.postgresql.org/docs/11/routine-vacuuming.html


2. pg12 主从+ patroni2.1 patroni leader 切换之后,pg 主从丢失这个是什么情况?

正常时:

patroni 切换leader 之后, 在执行查看主从命令,不再显示。

原因:

解决patroni leader 故障切换之后,pg 主从也发生了切换。


3. 长事务导致autovacuum不能推进oldest xmin解决方法

需要terminate该长事务。可以使用命令 select pg_terminate_backend($backend_pid);


4. 有什么数据库,对于非固定列的数据,存储与查询还有统计支持比较好的?

可以看下HBase 或者 MongoDB


5. 开源版的polardb支持全文检索吗?性能如何?

全文检索是社区postgresql原生提供的能力,开源版本postgresql for polardb继承了这个能力,但没有进行开发增强。


6. pglogical 插件比原生的逻辑复制有什么优势?

pglogical是一个独立插件,原理与原生的逻辑复制是一样的,pglogical有更加强大的冲突处理能力。具体可以参考:https://www.2ndquadrant.com/en/resources/pglogical/


7. pg 的高可用 在生产环境有在使用pgpool的吗?

pgpool可以使用。也可以看下Patroni是否满足需要。


8. PG性能抖动怎么记录现场?日志记录的执行计划只能看到执行计划突然很慢,1000次只有1次很慢。

可以尝试下auto_explain。具体可以参考 https://github.com/digoal/blog/blob/master/202106/20210621_03.md


9. 阿里云的pg支持btree_gin之类的extension?

支持。


10. postgresql内置的copyfrom函数为什么拷贝效率那么高

copy在多个方面提高了拷贝效率。具体可以参考 https://stackoverflow.com/questions/46715354/how-does-copy-work-and-why-is-it-so-much-faster-than-insert


11. pg vacuum analyze 大表的时候,会写很多wal日志吗

如果vacuum修改了page,就会产生wal日志。产生的日志量取决于对表的修改量大小,跟表的大小并没有直接关系。


12. 备份pg表时,为何主键和sequence 也被备份了

物理备份本来就含了主键和序列


13. 在pg里面,我一个用户要授予对所有数据库只有查询和修改,但是没有删除权限. 这要怎么实现,我现在很多库我不想一个一个库去授权

数据库没有提供内置的功能。可以自行编写脚本来对所有数据库进行授权。授权和撤销可以使用 grantrevoke命令。参考 https://www.postgresql.org/docs/11/sql-grant.html

https://www.postgresql.org/docs/11/sql-revoke.html

 

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
26天前
|
关系型数据库 分布式数据库 PolarDB
参与有礼|开源PolarDB文档捉虫
2024年9月,开源PolarDB-PG发布兼容PostgreSQL 15版本,为提升用户体验,特举办“开源文档捉虫”活动,邀请您反馈文档问题和优化建议。活动时间为2024年11月1日至2025年2月28日。参与即有机会赢取PolarDB开源社区T恤、新春茶碗及福字版印礼盒等丰富奖品。更多详情及反馈入口请点击链接。
参与有礼|开源PolarDB文档捉虫
|
1月前
|
数据库
|
1月前
|
存储 关系型数据库 MySQL
MySQL vs. PostgreSQL:选择适合你的开源数据库
在众多开源数据库中,MySQL和PostgreSQL无疑是最受欢迎的两个。它们都有着强大的功能、广泛的社区支持和丰富的生态系统。然而,它们在设计理念、性能特点、功能特性等方面存在着显著的差异。本文将从这三个方面对MySQL和PostgreSQL进行比较,以帮助您选择更适合您需求的开源数据库。
156 4
|
2月前
|
存储 关系型数据库 分布式数据库
使用开源PolarDB和imgsmlr进行高效的图片存储和相似度搜索
使用开源PolarDB和imgsmlr进行高效的图片存储和相似度搜索
|
2月前
|
SQL JSON 关系型数据库
MySQL是一个广泛使用的开源关系型数据库管理系统,它有许多不同的版本
【10月更文挑战第3天】MySQL是一个广泛使用的开源关系型数据库管理系统,它有许多不同的版本
174 5
|
2月前
|
人工智能 自然语言处理 关系型数据库
阿里云云原生数据仓库 AnalyticDB PostgreSQL 版已完成和开源LLMOps平台Dify官方集成
近日,阿里云云原生数据仓库 AnalyticDB PostgreSQL 版已完成和开源LLMOps平台Dify官方集成。
|
2月前
|
关系型数据库 分布式数据库 数据库
PolarDB 开源:推动数据库技术新变革
在数字化时代,数据成为核心资产,数据库的性能和可靠性至关重要。阿里云的PolarDB作为新一代云原生数据库,凭借卓越性能和创新技术脱颖而出。其开源不仅让开发者深入了解内部架构,还促进了数据库生态共建,提升了稳定性与可靠性。PolarDB采用云原生架构,支持快速弹性扩展和高并发访问,具备强大的事务处理能力及数据一致性保证,并且与多种应用无缝兼容。开源PolarDB为国内数据库产业注入新活力,打破国外垄断,推动国产数据库崛起,降低企业成本与风险。未来,PolarDB将在生态建设中持续壮大,助力企业数字化转型。
103 2
|
3月前
|
存储 关系型数据库 分布式数据库
揭秘PolarDB:中国云原生数据库的超级英雄,如何颠覆传统数据存储?
在数字化时代,数据成为企业的核心资产,而云原生数据库则是推动企业转型的关键。PolarDB凭借其先进的存储计算分离架构,在性能、可靠性和易用性方面脱颖而出,成为国内领先的选择。它支持多种数据库引擎,提供多副本存储机制,并采用按量付费模式,有效降低管理和成本压力,助力企业实现高效、可靠的数字化转型。
76 1
|
3月前
|
关系型数据库 分布式数据库 数据库
开源云原生数据库PolarDB PostgreSQL 15兼容版本正式发布
PolarDB进行了深度的内核优化,从而实现以更低的成本提供商业数据库的性能。
|
3月前
|
并行计算 关系型数据库 分布式数据库
朗坤智慧科技「LiEMS企业管理信息系统」通过PolarDB产品生态集成认证!
近日,朗坤智慧科技股份有限公司「LiEMS企业管理信息系统软件」通过PolarDB产品生态集成认证!

热门文章

最新文章

相关产品

  • 云原生数据库 PolarDB