开发者社区> 问答> 正文

Postgres stream replication slow

Postgresql stream replication slow

目前有两台postgres db, 使用stream replication 做主从同步,在比较重的写操作时发生了比较重的延迟.

通过对 
pg_xlog_location_diff(pg_current_xlog_location(), sent_location) AS not_sent,
pg_xlog_location_diff(sent_location, write_location) AS not_written,
pg_xlog_location_diff(write_location, flush_location) AS not_flushed,
pg_xlog_location_diff(flush_location, replay_location) AS not_replayed
FROM pg_stat_replication;
这几个参数的监控,我们发现在
pg_current_xlog_location() - (sent_location)有比较重的延迟,延迟的size将近在100MB+ ,网络吞吐量最大值在10MB/s.
最大的延迟将近5分钟.

本地模拟:
更新数据表的字段 一个表将近110w数据 ,size 是 612 MB.
我们在观察主从两边的wal log 的数目时发现,此次操作总归会生产104个wal 文件 size =16MB* 104 =1.644268775GB.
手工对比主从库wal 文件状态,从库远远落后于主库,将近落后30多个wal file.

我也使用了iperf去测试了网络情况

Client connecting to 192.168.6.55, TCP port 5001

TCP window size: 125 KByte (default)

[ 3] local 192.168.6.56 port 41489 connected with 192.168.6.55 port 5001
[ ID] Interval Transfer Bandwidth
[ 3] 0.0-10.0 sec 1.09 GBytes 939 Mbits/sec

网卡最大值为1G.

数据库 MAX_SEND_SIZE (XLOG_BLCKSZ * 16)
XLOG_BLCKSZ= 8K

理论上 延迟最大值为一秒.

Postgres version:psql (PostgreSQL) 9.2.13

有没有其他参数会影响到stream replication的性能?

期待大家的回复,讨论.

展开
收起
jaywu 2016-03-22 18:12:28 2580 0
1 条回答
写回答
取消 提交回答
  • 公益是一辈子的事, I am digoal, just do it. 阿里云数据库团队, 擅长PolarDB, PostgreSQL, DuckDB, ADB等, 长期致力于推动开源数据库技术、生态在中国的发展与开源产业人才培养. 曾荣获阿里巴巴麒麟布道师称号、2018届OSCAR开源尖峰人物.

    把从库的fsync关掉,因为从库fsync调用还需要时间,你没有统计进去.

    2019-07-17 18:35:17
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
MySQL Replication: Latest Developments 立即下载
Apache Kudu & Apache Spark SQL for Fast Analytics on Fast Data 立即下载
Three steps to clustering your MySQL Environment——MNC、MGC与MIC 立即下载