• 关于

    数据异步宕机的原因

    的搜索结果
  • 使用Flume Log4j Appender正确的姿势

    使用Flume Log4j Appender正确的姿势 我们使用Flume-ng的LoadBalancingLog4jAppender,将线上服务的日志实时传输到日志服务器,转交给告警系统和HDFS做存储。 FLume的Log4j Appender必须使用Log4j的异步加载器,否则一旦日志服务器...

    文章 edwardsbean 2014-01-25 2048浏览量

  • Rocketmq整体分析

     之前本人在实际的生产环境中,使用过activemq和rabbitmq消息队列,在使用过程中出现一些难以解决的问题,本文通过产品选型、网络架构和核心特性分析了rocketmq的优势和特性。 产品选型     我们在进行中间件选型时,一般都是通过下面几点来进行产品选型的:     1.性能     ...

    文章 技术小牛人 2017-11-28 1211浏览量

  • HBase原理-RegionServer宕机数据恢复

    HBase采用类LSM的架构体系,数据写入并没有直接写入数据文件,而是会先写入缓存(Memstore),在满足一定条件下缓存数据再会异步刷新到硬盘。为了防止数据写入缓存之后不会因为RegionServer进程发生异常导致数据丢失,在写入缓存之前会首先将数据顺序写入HLog中。如果不幸一旦发生Reg...

    文章 知与谁同 2017-08-01 1841浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • rmq_vs_kafka

    RocketMQ与kafka对比(18项差异) 淘宝内部的交易系统使用了淘宝自主研发的Notify消息中间件,使用Mysql作为消息存储媒介,可完全水平扩容,为了进一步降低成本,我们认为存储部分可以进一步优化,2011年初,Linkin开源了Kafka这个优秀的消息中间件,淘宝中间件团队在对Kaf...

    文章 中间件小哥 2016-04-08 4289浏览量

  • MySQL数据库的几种常见高可用方案

    随着人们对数据一致性的要求不断的提高,越来越多的方法被尝试用来解决分布式数据一致性的问题,如MySQL自身的优化、MySQL集群架构的优化、Paxos、Raft、2PC算法的引入等等,本文介绍MySQL数据库的几种常见高可用方案。 一、概述 我们在考虑MySQL数据库的高可用的架构时,主要要考虑...

    文章 云市场转载 2017-04-25 12232浏览量

  • 阿里云HBase推出普惠性高可用服务,独家支持用户的自建、混合云环境集群

    HBase可以支持百TB数据规模、数百万QPS压力下的毫秒响应,适用于大数据背景下的风控和推荐等在线场景。阿里云HBase服务了多家金融、广告、媒体类业务中的风控和推荐,持续的在高可用、低延迟、低成本方向上进行优化。目前单集群承诺可用性99.9%,SSD机型上可以做到请求毛刺99.5% < ...

    文章 daniel.meng 2019-10-11 2053浏览量

  • 关于MySQL HA的复制技术

    MySQL有各种HA方案,其中很多是基于复制的,复制是MySQL原生的数据冗余技术,很容易使用,但要做到无数据丢失却不容易。 异步的复制 默认的复制是异步的,即master commit时不等更新被slave接受就向客户端回话应答成功。slave会对master有一个更新延迟,...

    文章 小桥河西 2015-09-27 806浏览量

  • 阿里云HBase推出普惠性高可用服务,独家支持用户的自建、混合云环境集群

    HBase用户福利 新用户9.9元即可使用6个月云数据库HBase,更有低至1元包年的入门规格供广大HBase爱好者学习研究,更多内容请参考链接 前言 HBase可以支持百TB数据规模、数百万QPS压力下的毫秒响应,适用于大数据背景下的风控和推荐等在线场景。阿里云HBase服务了多家金融、广告、媒...

    文章 daniel.meng 2019-10-17 4108浏览量

  • 反应式编程探索与总结

    1.什么是反应式编程 Reactive Programming 一种以异步处理数据流为中心思想的编程范式,这个范式存在已久,不是新概念,就像面向过程、面向对象编程、函数式编程等范式。 对比一下,Reactive streams指的是一套规范,对于Java开发者来讲,Reactive Strea...

    文章 猴大大13 2019-11-25 631浏览量

  • 《叶问》第1期

    2018年6月10日,周日 MySQL主从复制什么原因会造成不一致,如何预防及解决? 一、导致主从不一致的原因主要有: 1、人为原因导致从库与主库数据不一致(从库写入)2、主从复制过程中,主库异常宕机3、设置了ignore/do/rewrite等replication等规则4、binlog非row...

    文章 tplinux 2018-11-29 1215浏览量

  • OceanBase高可用实践

    背景 高可用是构建分布式系统的基石。一方面,出于成本考虑, 分布式系统往往采取比较廉价的硬件,其可靠性相对于小型机、专有硬件有很大的不足, 而分布式系统的规模一般比较大,假如硬件的可靠性只有三个9(99.9%), 一个1000台机器规模的集群每天将面临1台机器宕机的风险,在如此大规模的情况下,存储...

    文章 KB小秘书 2019-07-28 1391浏览量

  • MySQL 半同步复制+MMM架构

    介绍     上篇文章介绍了MMM架构的实现方法,但是上篇文章的MMM方案的复制是异步复制,异步复制的主要问题在于当主从存在延时时如果主机出现了故障导致了主从切换时这时将会存在数据丢失;mysql为了解决异步复制数据丢失的问题增加了半同步复制,半同步复制存在5.5以上的版本,半同步复制的原理是...

    文章 长征6号 2013-10-09 878浏览量

  • 万字长文剖析AliSQL X-Cluster|基于X-Paxos的高性能强一致MySQL数据库

    MySQL数据库从诞生以来就以其简单、易用、开源为其主打特点,成为不少开发者首选的数据库系统。阿里在2008年开始提出"去IOE"的口号,其中,使用大量的MySQL,配合业务的改造替代原有的商业版Oracle系统。自此集团迈入了MySQL数据库的时代。根据阿里交易型应用的特点,以及双十一这样业界罕...

    文章 技术小能手 2017-08-10 5603浏览量

  • 高可用系统常用解决手段浅述

    所谓可用性,是指 某系统能够提供正常服务的特性。 可用性的高低是使用不可用时间占总时间的比例来衡量。不可用时间是从故障发生到故障恢复的时间。 比如,可用性 4 个 9 的系统(99.99%),它一年宕机时间不能超过53分钟(=365*24*60*(1-0.9999)) 。 做到高可用系统,需要尽可...

    文章 知与谁同 2017-05-23 1317浏览量

  • 海量数据下的注册中心 - SOFARegistry 架构介绍

    SOFAStack Scalable Open Financial Architecture Stack 是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 SOFARegistry 是蚂蚁金服开源的具有承载海量服务注册和订阅能力的、...

    文章 初商 2019-08-01 635浏览量

  • 极速同步如何保证反向同步数据一致性

    背景 文件网关在一个事务中将客户户端数据写入缓存盘返回,然后以异步的方式在后台线程中上传到OSS,如果存在多个网关共享同时写入一个文件,对象的完整性是由OSS语义来保证的,网关始终能够保证正向同步的数据一致性。当网关需要反向同步OSS端的元数据时,之前采用的策略是定期在用户所进入的目录内进行全扫描...

    文章 panyun 2020-01-17 645浏览量

  • 独家支持用户自建、混合云环境集群,快收下这份HBase高可用解决方案

    1、HBase用户福利 新用户9.9元即可使用6个月云数据库HBase,更有低至1元包年的入门规格供广大HBase爱好者学习研究,点这里https://developer.aliyun.com/article/737804?spm=a2c6h.12873639.0.0.4e0834cezewMGJ...

    文章 Roin123 2019-12-17 319浏览量

  • 海量数据下的注册中心 - SOFARegistry 架构介绍

    SOFAStackScalable Open Financial Architecture Stack 是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 SOFARegistry 是蚂蚁金服开源的具有承载海量服务注册和订阅能力的、高...

    文章 花肉酱 2019-08-06 2821浏览量

  • http://blog.51cto.com/hongchen99/1936473

    1 2 3 4 5 mysql复制的优点:     1、数据分布     2、数据备份     3、负载均衡     4、提示高可用性 mysql/slave master/slave较为简单,master负责响应客户端的写请求,slave...

    文章 技术小牛人 2017-11-14 706浏览量

  • 海量数据下的注册中心 - SOFARegistry 架构介绍

    SOFAStackScalable Open Financial Architecture Stack 是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。  SOFARegistry 是蚂蚁金服开源的具有承载海量服务注册和订阅能力的...

    文章 s潘潘 2019-04-26 903浏览量

  • 如何正确使用缓存?

    1 常见概念 在合理应用缓存前,需要了解缓存领域里相关的几个常用术语: 1)缓存命中:表示数据能够从缓存中获取,不需要回源; 3)Cache miss:表示没有命中缓存,如果缓存内存中还有内存空间的话,会将数据加入到缓存中; 4)存储成本:当没有命中缓存时,回源获取后会将数据放置到存储中,整个将数...

    文章 开发者社区 2019-11-25 1765浏览量

  • 服务注册中心如何实现秒级服务上下线通知 | SOFARegistry 解析

    SOFAStack (Scalable Open Financial  Architecture Stack) 是蚂蚁金服自主研发的金融级云原生架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 SOFARegistry 是蚂蚁金服开源的具有承载海量服务注册和订阅...

    文章 花肉酱 2020-01-19 179浏览量

  • MySQL · 引擎特性 · InnoDB IO子系统

    前言 InnoDB做为一款成熟的跨平台数据库引擎,其实现了一套高效易用的IO接口,包括同步异步IO,IO合并等。本文简单介绍一下其内部实现,主要的代码集中在os0file.cc这个文件中。本文的分析默认基于MySQL 5.6,CentOS 6,gcc 4.8,其他版本的信息会另行指出。 基础知识...

    文章 db匠 2017-03-21 1539浏览量

  • 阿里基础设施的智能监控

    IDC、网络、服务器等基础设施承载了一次又一次的双十一奇迹。随着阿里集团业务全球化、多元化发展,作为整个集团之根本的基础设施,其运营水平显得愈发重要,智能监控成为了重中之重。 阿里IDC承载着为全球业务提供基础服务的重担,服务的稳定性和可用性有着极高的业务要求,同时又面临全球机房环境迥异、设施链条...

    文章 初商 2019-07-30 970浏览量

  • 响应速度不给力?解锁正确缓存姿势

    作者 | 科怀 阿里妹导读:响应时间长,遇到性能瓶颈时,开发者第一个想到的总是性能优化。《什么技能产品经理不会提,但技术人必须懂?》讲到了什么时候需要使用缓存。但缓存的用法是什么?一旦缓存使用不当,或稍有不注意,反而会翻车,导致系统投入更多的维护成本,陡增更高的复杂度。今天,科怀就来讲讲缓存的正确...

    文章 檸,铮 2019-12-09 660浏览量

  • 阿里HBase超详实践总结 | 一文读懂大数据时代的结构化存储

    前言时间回到2011年,Hadoop作为新生事物,在阿里巴巴已经玩得风生水起,上千台规模的”云梯”是当时国内名声显赫的计算平台。 这一年,Hadoop的好兄弟HBase由毕玄大师带入淘宝,开启了它的阿里之旅。从最初的淘宝历史交易记录,到去年的支付宝消费记录存储在线历史存储统一;从蚂蚁安全风控的多年...

    文章 技术小能手 2017-06-20 4363浏览量

  • 大数据时代的结构化存储—HBase在阿里的应用实践

    福利:国际顶级盛会HBaseCon Asia 2018将于8月在北京举行,目前正免费开放申请中,更多详情参考https://yq.aliyun.com/promotion/631 前言 时间回到2011年,Hadoop作为新生事物,在阿里巴巴已经玩得风生水起,上千台规模的"云梯"是当时国内名声显赫...

    文章 天梧 2017-02-21 10292浏览量

  • MongoDB副本集

    MongoDB副本集 一、副本集基础 1.1 副本集概念   MongoDB副本集是由一个主节点和多个副本节点组成。主节点将数据的改变推送到副本节点上,在一定的延迟之后,每个MongoDB实例维护相同的数据。通过维护冗余的数据副本,能够实现数据的备份,读写分离和自动故障转移。 1.2 副本集使用场...

    文章 梓杰 2019-09-08 1230浏览量

  • 认识数据中心两个关键指标RTO和RPO

    用来描述和评价数据中心有很多专有参数和指标,通过这些数据可以反映出数据中心的各种运行状态,其中有两个关键指标必须有所了解: RTO和RPO。RTO和RPO是数据中心灾难恢复方面的重要参考指标。现在的数据中心对业务的连续性有苛刻要求,但是故障不可避免,一旦发生了故障就需要启动备份机制,确保业务的连...

    文章 泡泡浅眠 2017-07-07 3656浏览量

  • 第九章:Redis replication 主从复制

    什么是主从复制 一个master可以有多个slave 一个slave只能有一个master 数据流是单向的,master到slave 全量复制和部分复制 run id 查看复制偏移量(用来比对两边数据同步问题,相差不能太大) 插一个命令redis-cli -p 6379 info serve...

    文章 微笑着生活 2018-01-31 766浏览量

1 2 3 4 ... 7 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务