• MySQL 个人记录的三种日志

    还有一种情况,在宕机前正处于checkpoint 的刷盘过程,且数据页的刷盘进度超过了日志页的刷盘进度,此时会出现数据页中记录的 LSN 大于日志中的 LSN,这时超出日志进度的部分将不会重做,因为这本身就表示已经做过的...
    文章 2020-09-14 184浏览量
  • 《叶问》第1期

    1、人为原因导致从库与主库数据不一致(从库写入)2、主从复制过程中,主库异常宕机3、设置了ignore/do/rewrite等replication等规则4、binlog非row格式5、异步复制本身不保证,半同步存在提交读的问题,增强半同步...
    文章 2018-11-29 1400浏览量
  • OceanBase实践入门:高可用原理和容灾方案

    前者格式记录数据块的变化,后者格式记录修改数据的SQL。前者记录未提交事务的日志(因为InnoDB有UNDO),而后者只记录已提交的事务日志。所以MySQL实例宕机恢复时都有可能没办法保证两套事务日志完全一致,更不用...
    文章 2019-08-05 3408浏览量
  • HBase 系统架构

    在分布式系统环境中,无法避免系统出错或者宕机,一旦HRegionServer以外退出,MemStore中的内存数据就会丢失,引入HLog就是防止这种情况。工作机制: 每个HRegionServer中都会有一个HLog对象,HLog是一个实现Write ...
    文章 2017-05-02 922浏览量
  • InnoDB的数据页结构

    为了保证页能够完整地写入磁盘(如可能发生的写入过程中磁盘损坏、机器宕机原因),InnoDB存储引擎的页中设置了File Trailer部分。File Trailer只有一个FIL_PAGE_END_LSN部分,占用8个字节。前4个字节代表该页的...
    文章 2017-01-16 739浏览量
  • 《Spark大数据分析:核心概念、技术及实践》大数据...

    SequenceFile有三种不同的格式:未压缩格式记录压缩格式和块压缩格式。在记录压缩格式的SequenceFile中,只有记录中的值才压缩;而在块压缩格式的SequenceFile中,键和值都压缩。1.3 列存储 数据可以面向行或面向...
    文章 2017-05-19 3966浏览量
  • OpenSearch在线干预服务

    如果服务运行过程中宕机,重启之后依旧会启动线程从pending_task_table中读取待dump的任务,保证服务的正确运行。ReceptionWorker 通过ops worker注册干预类型后,就可以发送干预数据。reception worker支持增、删、...
    文章 2018-12-07 3628浏览量
  • hadoop集群管理系统搭建规划说明

    当主节点宕机后从节点代替主节点工作,正常状态是从节点和计算节点一样工作。这种架构设计保证数据完整性。首先我们保证每台计算节点上分别有一个DataNode节点和NodeManager节点。因为都是计算节点,真正干活的。在...
    文章 2019-01-04 1189浏览量
  • Linux分区类型EXT2、EXT3、EXT4详解

    ext3文件系统能够极大地提高文件系统的完整性,避免了意外宕机对文件系统的破坏。在保证数据完整性方面,ext3文件系统有2种模式可供选择。其中之一就是“同时保持文件系统及数据的一致性”模式。采用这种方式,你...
    文章 2017-11-28 1391浏览量
  • hadoop集群管理系统搭建规划说明

    当主节点宕机后从节点代替主节点工作,正常状态是从节点和计算节点一样工作。这种架构设计保证数据完整性。首先我们保证每台计算节点上分别有一个DataNode节点和NodeManager节点。因为都是计算节点,真正干活的。在...
    文章 2018-10-24 1526浏览量
  • Uber是如何使用MySQL设计可扩展性数据存储的?

    如果凌晨3点我们接到叫车请求,但是这时数据存储无法响应查询,导致业务宕机,我们是否有相关操作知识可以快速解决这个问题。鉴于以上种种,我们分析了几种常用的选择的优势和潜在的限制,比如Cassandra、Riak、...
    文章 2017-05-02 1870浏览量
  • 数据库面试葵花宝典,让你面试一次过

    共同存在的问题:主从延迟问题的存在,在主库宕机,切换过程中要考虑数据一致性的问题,避免出现主从复制不一致 Qusetion14: 什么是死锁?锁等待?如何优化这类问题?通过数据库哪些表可以监控?死锁是指两个或多个...
    文章 2019-07-03 1472浏览量
  • redis之持久化机制

    AOF文件是一个只进行追加的日志文件,所以不需要写入seek,即使由于某些原因(磁盘空间已满,写的过程中宕机等等)未执行完整的写入命令,你也也可使用redis-check-aof工具修复这些问题。Redis 可以在 AOF 文件体积变得过...
    文章 2019-07-30 749浏览量
  • 云计算引入可能破坏之前建立的IT秩序

    Crowhurst建议,IT人员应该在与公共云服务供应商签订合同时把对治理方面的要求考虑进来,合同中至少要有这样的条款:一旦供应商的系统出现宕机、要修改服务、有新的服务加入,以及版本不兼容和要对API进行修改,供应...
    文章 2017-09-04 1234浏览量
  • 天天用Redis,持久化方案有哪些你知道吗?

    理论上只有在系统突然宕机的情况下丢失1秒的数据(当然,这是不太准确的)。文件重写机制 随着命令不断写入AOF,文件会越来越大,为了解决这个问题,Redis引入AOF重写机制压缩文件体积。AOF文件重写是把Redis进程内...
    文章 2020-04-20 564浏览量
  • 第九章:Redis replication 主从复制

    当master宕机的复制安全 在使用Redis复制的设置中,强烈建议在主服务器和从服务器中启用持久性。如果这种情况不可行,例如由于磁盘速度非常慢导致的延迟问题,则应配置实例以避免重新启动后自动重新启动。为了更好地...
    文章 2018-01-31 819浏览量
  • 《云安全原理与实践》——2.1 云计算面临的技术风险

    当然,为了做到这一点,攻击者必须获得受感染网络上另一台虚拟机的访问权。2.1.4 网络安全风险泛在接入作为云计算服务的五大特征之一,云环境下的网络安全问题也就自然而然地凸显出来。在网络风险方面,云计算主要...
    文章 2017-09-04 2797浏览量
  • “十年磨一剑”-有赞的HBase平台实践和应用之路

    HA READ:该方式不容许集群宕机宕机对表的读写可能会造成秒甚至分钟级别的影响。针对宕机问题,有赞开发了自己SDK,ha-hbase-client,可以简单认为是一个前端代理。它配置了两个底层的HBase集群(如下图所示),...
    文章 2019-03-21 3326浏览量
  • Cassandra 在 360 的实践与改进

    ❷ Cassandra 使用最终一致性策略,而非 HBase 的强一致性策略,配合读写策略的处理,Cassandra 可以在确保数据安全性、可靠性、一致性的前提下,出现节点宕机而不需要恢复时间,集群读写不产生任何停顿,而此场景下...
    文章 2019-12-30 418浏览量
  • 分布式一致性协议的一点笔记

    Paxos算法为非拜占庭一致性算法,运行在允许宕机故障的异步系统中,不要求可靠的消息传递,可容忍消息丢失、延迟、乱序以及重复。它利用大多数机制保证了2F+1的容错能力,即2F+1个节点的系统最多允许F个节点同时出现...
    文章 2020-02-20 1063浏览量
  • 轻松搞定RocketMQ入门

    FLUSH_SLAVE_TIMEOUT:消息发送成功,但是服务器同步到 Slave 时超时,消息已经进入服务器队列,只有此时服务器宕机,消息才会丢失 SLAVE_NOT_AVAILABLE:消息发送成功,但是此时 slave 不可用,消息已经进入服务器...
    文章 2018-08-10 28899浏览量
  • 流量暴增,掌门教育如何基于 Spring Cloud Alibaba ...

    节点宕机:其中某个节点宕机,其任务转移到其它节点,因为有虚拟节点的缘已经故,所以此节点的任务会均衡 ReSharding 到其它节点,那么,集群在任何时候,任务处理都是分片均衡的,如上图 2 中,B 节点宕机,#1、#2 ...
    文章 2020-09-10 753浏览量
  • 如何设计并实现一个通用的应用运维管控平台

    另外虚拟资源管理对宕机恢复或机房、机架断电等问题也会有较大的帮助。整个资源管理比较简单,可以优先完成物理机资源管理功能,再实现虚拟资源管理功能。2.作业管理 作业管理是应用运维管控系统的核心功能,也是...
    文章 2017-08-01 1329浏览量
  • 万字总结,终于有人把 Redis 持久化说明白了

    复制主要实现了数据的多备份,以及对于读操作的负载均衡和简单的故障恢复。缺陷:故障恢复无法自动化;写操作无法负载均衡;存储能力受到单机的限制。哨兵:在复制的基础上,哨兵实现了自动化的故障恢复。缺陷:写...
    文章 2020-04-11 1275浏览量
  • 没有宫廷内斗,数据库界的延禧攻略

    通常没说明指的都是异步,即主库执行完 Commit 后,在主库写入 Binlog 日志后即可成功返回客户端,无需等 Binlog 日志传送给从库,一旦主库宕机,有可能会丢失日志。半同步复制: MySQL5.5 版本之后引入了半同步复制...
    文章 2018-08-28 2226浏览量
  • 亲密接触Redis-第二天(Redis Sentinel)

    但是,一旦当master宕机时,slave会变成master,这时它会使用它本身所在目录内的RDB文件来作为持久化的入口,此时还是everything ok,接着那台原先宕机的旧master重新被恢复后。此时这台旧的master上的RDB文件和从...
    文章 2016-02-14 1182浏览量
  • 可用性高达五个9!支付系统高可用架构设计实战

    对于资源使用的限制设计是高可用系统最重要的一点,也是容易被忽略的一点,资源相对有限,用的过多了,自然会导致应用宕机。为此我们做了以下功课: 限制连接数 随着分布式的横向扩展,需要考虑数据库连接数,而不是...
    文章 2017-05-02 1432浏览量
  • 可用性高达五个9!支付系统高可用架构设计实战

    对于资源使用的限制设计是高可用系统最重要的一点,也是容易被忽略的一点,资源相对有限,用的过多了,自然会导致应用宕机。为此我们做了以下功课: 限制连接数 随着分布式的横向扩展,需要考虑数据库连接数,而不是...
    文章 2018-01-01 1945浏览量
  • 带你读《KVM实战:原理、进阶与性能调优》之一:虚拟化...

    在没有启用硬件虚拟化辅助的时候,它通过软件的二进制翻译仿真出目标平台呈现给客户机,客户机的每一条目标平台指令都会被QEMU截取,并翻译成宿主机平台的指令,然后交给实际的物理平台执行。由于每一条都需要这么...
    文章 2019-10-31 3543浏览量
  • DockOne微信分享(七十九):基于容器技术构建企业级...

    蓝绿发布应该是保证无宕机的前提下,将老版更新到新版。Q:请问,Kubernetes中的A域名指向一个应用,B域名指向另外一个应用,都要用到80和443端口,这个该怎么做呢?A:前端加一个route,进行域名和IP+Port的转发...
    文章 2017-10-11 2452浏览量
1 2 3 4 5 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化