如何用好PostgreSQL的备份与恢复?
PostgreSQL备份与恢复操作涉及的参数和相关文件较多,内部逻辑关系较复杂,恢复分类方式容易混淆。
本文首先介绍通常的数据库故障场景与处理方案,然后通过梳理PostgreSQL数据库备份与恢复的相关文件、参数配置与主要流程,对PostgreSQL恢复方式进行了清晰分类,最后给出了应对典型故障,PostgreSQL备份与恢复的配置方案。
软件各种系统架构图
原文:软件各种系统架构图
https://blog.csdn.net/everythingss/article/details/78749247
该技术架构图是本人根据多年企业技术架构经验而制定,是企业技术的总架构图,希望对CTO们有所借鉴。
达达O2O后台架构演进实践:从0到4000高并发请求背后的努力
1、引言
达达创立于2014年5月,业务覆盖全国37个城市,拥有130万注册众包配送员,日均配送百万单,是全国领先的最后三公里物流配送平台。 达达的业务模式与滴滴以及Uber很相似,以众包的方式利用社会闲散人力资源,解决O2O最后三公里即时性配送难题(2016年4月,达达已经与京东到家合并)。
模拟使用Flume监听日志变化,并且把增量的日志文件写入到hdfs中
1.采集日志文件时一个很常见的现象
采集需求:比如业务系统使用log4j生成日志,日志内容不断增加,需要把追加到日志文件中的数据实时采集到hdfs中。
1.1.根据需求,首先定义一下3大要素:
采集源,即source—监控日志文件内容更新:exec ‘tail -F file’ 下沉目标,即sink—HDFS文件系统:hdfs sink
Source和sink之
MySQL大表优化方案
MySQL大表优化方案
当MySQL单表记录数过大时,增删改查性能都会急剧下降,可以参考以下步骤来优化:
单表优化
除非单表数据未来会一直不断上涨,否则不要一开始就考虑拆分,拆分会带来逻辑、部署、运维的各种复杂度,一般以整型值为主的表在千万级以下,字符串为主的表在五百万以下是没有太大问题的。
支付宝17年新春红包技术体系剖析(含资料下载)
支付宝17年春节红包最大的特点是AR技术应用以及五福红包(敬业福)的回归,截止大年三十晚,支付宝页面显示约有1.68亿人集齐五福,除夕当天参与人数是2.2亿;开奖峰值高达90W/s。支撑如此之高的并发业务和庞大的人群背后的技术体系究竟隐藏着什么奥秘呢?在本文,16、17年红包技术负责人天镜飞将为您讲解红包背后“不为人知”的秘密。