• 关于

    分布式数据处理系统发生故障怎么办

    的搜索结果
  • 分布式事务及其一致性协议

    一:什么是事务。 事务是由一系列对系统中的数据进行访问和更新的操作所组成的一个程序执行逻辑单元。狭义上的事务指的就是数据库的事务。 二:事务(ACID)的特性。 事务具有四个特性:1.一致性(Consistency):事务的操作需要从一个一致性状态到另一个一致性状态。如果一次事务中,有些操作更新成...

    文章 java架构 1970-01-01 494浏览量

  • 分布式基础,通俗易懂CAP?

    分布式系统非常关注三个指标: 数据一致性 系统可用性 节点连通性与扩展性 关于一致性 数据“强一致性”,是希望系统只读到最新写入的数据,例如:通过单点串行化的方式,就能够达到这个效果。 关于session一致性,DB主从一致性,DB双主一致性,DB与Cache一致性,数据冗余一致性,消息时序一...

    文章 初商 2019-08-08 400浏览量

  • 分布式系统架构理论 - CAP、BASE

    1. CAP 理论 任何分布式架构设计的系统,只能同时满足 CAP 中的任意两种,无法同时三种并存。 CAP(Consistency、Availability、Partition tolerance) 是三个单词的缩写,分别代表一致性,可用性,分区容错性。 这个理论到目前为止都适用于分布式架...

    文章 holyplace 2020-04-11 736浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 分布式基础,通俗易懂CAP?

    分布式系统非常关注三个指标:  ●  数据一致性 ●  系统可用性 ●  节点连通性与扩展性 关于一致性 数据“强一致性”,是希望系统只读到最新写入的数据,例如:通过单点串行化的方式,就能够达到这个效果。 关于session一致性,DB主从一致性,DB双主一致性,DB与Cache一致性,数据冗余一...

    文章 技术小能手 2018-10-31 1195浏览量

  • 分布式一致性的想法

    背景 最近一直在思考,工作这么多年下遇到的分布式系统的一下问题,以及针对这些问题提供的解决方案。 借这个机会,顺便梳理清楚这块知识,希望同大家一起探讨下 常见一致性问题 下订单减库存 在我们做的电商系统中,会有这样的一个场景:用户下单购买某个商品,然后进行扣减商品库存的场景。 如果先下订单,然后...

    文章 曹林华 2017-11-27 1370浏览量

  • 分布式系统数据层设计模式

    原创声明:本文系作者原创,谢绝个人、媒体、公众号或网站未经授权转载,违者追究其法律责任。 2013 年 5 月,支付宝最后一台小型机下线,去 “IOE” 取得里程碑进展。支付宝(以及后来的蚂蚁金服)走的是一条跟传统金融行业不同的分布式架构之路。要基于普通硬件资源实现金融级的性能和可靠性,有不少难...

    文章 初商 2019-08-03 640浏览量

  • 车联网上云最佳实践(二)

    第一篇内容:《车联网上云最佳实践(一)》 二、传统IDC架构介绍及技术详解 俗话说知己知彼百战不殆,我们要上云首先要充分了解自己业务和应用架构。然后在充分了解云上产品的特性,看看哪些产品可以直接被我们使用,哪些是需要我们的应用或架构做出调整的。下面我们来分析下智能车联网平台的相关架构。   1、...

    文章 zkw9527 2018-08-22 2490浏览量

  • 秘诀!支付宝支撑双十一4200万次/秒的数据库请求峰值的技术实现

    各位关心OceanBase数据库的同学,大家好!我是OceanBase团队的蒋志勇。借DBAplus社群直播平台,和大家聊一聊近八年来OceanBase的发展以及关键特性。 一、发展历程 OceanBase数据库是阿里巴巴和蚂蚁金服完全自主研发的金融级分布式关系数据库系统,和基于开源数据库产品进行...

    文章 技术小能手 2018-05-10 2616浏览量

  • DTCC 2019 | 深度解码阿里数据库实现 数据库内核——基于HLC的分布式事务实现深度剖析

    摘要: 分布式事务是分布式数据库最难攻克的技术之一,分布式事务为分布式数据库提供一致性数据访问的支持,保证全局读写原子性和隔离性,提供一体化分布式数据库的用户体验。本文主要分享分布式数据库中的时钟解决方案及分布式事务管理技术方案。混合逻辑时钟(HLC)可以实现本地获取,避免了中心时钟的性能瓶颈和单...

    文章 七幕 2019-05-24 6876浏览量

  • OceanBase创始人阳振坤:什么是面向未来的数据库?

    2019年11月19日,蚂蚁金服在北京举办“巅峰洞见·聚焦金融新技术”发布会,介绍2019双11支付宝背后的技术,并重磅发布全新OceanBase 2.2版本和SOFAStack双模微服务平台。我们将系列演讲整理并发布在 “蚂蚁金服科技” 公众号上,欢迎关注。 蚂蚁金服高级研究员兼 OceanBa...

    文章 缪克卢汉 2019-11-27 540浏览量

  • OceanBase数据库创始人阳振坤分享征战6088万tpmC的艰辛之路

    OB君:中国人民大学常被誉为是“中国人文社会科学的最高学府”,其实人民大学也是“中国数据库的发源地”。由中国人民大学教授萨师煊与王珊合作编写的《数据库系统概论》是国内第一部系统阐明数据库原理、技术和理论的教材,也被公认为是国内数据库领域的经典权威教材。近期,蚂蚁金服高级研究员、OceanBase团...

    文章 荔子liqi 2019-10-23 3743浏览量

  • 用Kubernetes解决容器的混乱(上)

    存在的问题。你需要精心准备比Dockerfiles更多的东西来将其应用于生产——管理所有容器的容器编排系统。 问题  让我们来看一个相对简单的应用程序,一个使用PHP和MySQL的、数据库驱动的Web应用程序。你想到的第一个解决方案可能是分解所有HTTP职责,例如将API和前端用户界面(UI)投放...

    文章 店家小二 2018-12-13 727浏览量

  • OceanBase创始人阳振坤:什么是面向未来的数据库?

    2019年11月19日,蚂蚁金服在北京举办“巅峰洞见·聚焦金融新技术”发布会,介绍2019双11支付宝背后的技术,并重磅发布全新OceanBase 2.2版本和SOFAStack双模微服务平台。欢迎持续关注~ 蚂蚁金服高级研究员兼 OceanBase 数据库创始人阳振坤,在发布会分享了《Ocean...

    文章 荔子liqi 2019-11-29 858浏览量

  • 舞动的桥 阿里云首个百万IOPS云盘的背后

    1940年11月7日,竣工才4个月的塔科马海峡大桥在微风中大幅度舞动,桥上的汽车急速滑动,很快就戏剧性的垮塌。这件事故给建筑工程行业造成极大的震惊,很违反直觉,很低的风速居然会吹垮一座钢铁建造的大桥,在此之前所有的桥梁专家都没有意识到这个问题,事实上若干年后桥梁结构学与空气动力学得到极大发展,人类...

    文章 阿里云头条 2018-02-01 3663浏览量

  • 车联网上云最佳实践(一)

    一、车联网行业特性讲解最近两年车联网发展受到政府部门、科研院以及各大互联网巨头的广泛关注和积极推动。从应用来看,主要包括两种模式:一是前装模式(即车辆出厂前安装),是乘用车厂主导或者与有相关能力的公司合作,例如上汽和阿里巴巴的合作。另一种就是后装模式(通常是将车机设备安装在汽车的OBD接口上例如各...

    文章 云攻略小攻 2018-08-31 2823浏览量

  • 走近华佗,解析自动化故障处理系统背后的秘密

    集群医生华佗是集群自动化故障监测和处理系统,是平台和运维对接的关键系统。一方面完成飞天其他组件不擅长的OS和硬件的故障自动监测和处理,另一方面推动飞天去及时规避硬件和OS引起的故障,使得故障能够闭环运转,大幅度减少故障处理成本和造成的影响。飞天5K项目期间的规模效应凸显出自动化处理故障的必要性,大...

    文章 yq传送门 2016-12-18 4475浏览量

  • 难以置信,MySQL也可以无损自由切换

            MySQL通常在人们眼中就是一个低端、开源、大众化的数据库产品,它的稳定性和可用性一直被人们所置疑,被认为难登大雅之堂,只适用于互联网应用,难于应用到可用性高的场景中,比如金融、证券等行业。然而时代的变化太快,MySQL也不能再以过去的眼光来看,从MySQL金融版的诞生开始,它已经...

    文章 1639601759190494 2018-06-16 4822浏览量

  • 《解读NoSQL》——2.6 通过数据库分片获得水平扩展能力

    本节书摘来自异步社区出版社《解读NoSQL》一书中的第2章,第2.6节,作者: 【美】Dan McCreary(丹•麦克雷) , Ann Kelly(安•凯利),更多章节内容可以访问云栖社区“异步社区”公众号查看。 2.6 通过数据库分片获得水平扩展能力 随着一个组织存储的数据量增加,可能在某个时...

    文章 异步社区 2017-05-02 1543浏览量

  • 大数据存储:分布式系统的事务处理

    当我们在生产线上用一台服务器来提供数据服务的时候,我会遇到如下的两个问题: (1)一台服务器的性能不足以提供足够的能力服务于所有的网络请求。 (2)我们总是害怕我们的这台服务器停机,造成服务不可用或是数据丢失。 于是我们不得不对我们的服务器进行扩展,加入更多的机器来分担性能上的问题,以及来解决单...

    文章 知与谁同 2017-08-01 736浏览量

  • 技术向:大数据存储—分布式系统的事务处理

    当我们在生产线上用一台服务器来提供数据服务的时候,我会遇到如下的两个问题: (1)一台服务器的性能不足以提供足够的能力服务于所有的网络请求。 (2)我们总是害怕我们的这台服务器停机,造成服务不可用或是数据丢失。 于是我们不得不对我们的服务器进行扩展,加入更多的机器来分担性能上的问题,以及来解决单点...

    文章 知与谁同 2017-08-01 921浏览量

  • 新金融分布式架构之SOFAStack解决方案

    本文始发于:云栖社区时间:2020-06-10 原文链接:https://yq.aliyun.com/articles/764640 金融行业正在流淌着一股去IOE,去集中化的IT架构转型洪流。我有幸参与到这股洪流中,见证这一重大变革。以下是我对这股洪流的一些思考和想法。 1.当前主流金融的IT架...

    文章 SRE团队技术小编-小兰 2020-08-31 424浏览量

  • 分布式系统理论之两阶段提交协议

    一,两阶段提交协议介绍 两阶段提交协议是用来保证分布式系统事务的协议。在分布式系统中,一个事务需要由多台机器协调完成,机器之间通过网络来通信,如何保证一组操作在多台机器上要么都做,要么都不做呢?(事务的ACID特性) 【比如,一个事务包括三个操作A,B,C,操作A,B,C分别 在机器1,2,3上完...

    文章 技术mix呢 2017-08-30 879浏览量

  • 分布式系统架构,回顾2020年常见面试知识点梳理(每次面试都会问到其中某一块知识点)

    分布式分为分布式缓存(Redis)、分布式锁(Redis 或 Zookeeper)、分布式服务(Dubbo 或 SpringCloud)、分布式服务协调(Zookeeper)、分布式消息队列(Kafka 、RabbitMq)、分布式 Session 、分布式事务、分布式搜索(Elasticsear...

    文章 程序员白楠楠 2020-12-30 145浏览量

  • 如何用消息系统避免分布式事务?

    前阵子从支付宝转账1万块钱到余额宝,这是日常生活的一件普通小事,但作为互联网研发人员的职业病,我就思考支付宝扣除1万之后,如果系统挂掉怎么办,这时余额宝账户并没有增加1万,数据就会出现不一致状况了。 上述场景在各个类型的系统中都能找到相似影子,比如在电商系统中,当有用户下单后,除了在订单表插入一条...

    文章 亮伟 2016-07-13 5243浏览量

  • ENode 1.0 - 框架的总体目标

    开源地址:https://github.com/tangxuehua/enode 本文想介绍一下enode框架要实现的目标以及部分实现分析思路剖析。总体来说enode框架是一个基于cqrs架构和消息驱动的应用开发框架。在说实现思路之前,我们先看一下enode框架希望实现的一些目标吧! 框架总体目标...

    文章 netfocus 2016-05-27 1518浏览量

  • 如何用消息系统避免分布式事务?

     前阵子从支付宝转账1万块钱到余额宝,这是日常生活的一件普通小事,但作为互联网研发人员的职业病,我就思考支付宝扣除1万之后,如果系统挂掉怎么办,这时余额宝账户并没有增加1万,数据就会出现不一致状况了。   上述场景在各个类型的系统中都能找到相似影子,比如在电商系统中,当有用户下单后,除了在订单表插...

    文章 力君 2015-12-04 23071浏览量

  • 一步一步理解 Java 企业级应用的可扩展性

    摘要:本文主要介绍如何理解 Java 应用的扩展方式以及不同类型的扩展技术和具体技巧,介绍一些有关 Java 企业级应用的一般扩展策略。 老实说,“可扩展性”是个全面且详尽的话题,而且往往得不到充分理解。人们通常认为可扩展性等同于高可用性,笔者见过编程新手和架构师“老手”都建议将集群作为可扩展性和...

    文章 oneapm_official 2016-01-13 1743浏览量

  • 详解:从Greenplum、Hadoop到现在的阿里大数据技术

    对于企业来说,但是到底云计算是什么呢?相信很多企业都有这样的困惑,让我们一起回到这个原始的起点探讨究竟什么是云计算?云计算对于企业而言到底意味什么?云计算的三条发展路径及三种落地形态 当回到最初的起点再审视云计算的发展路径,可以发现,经过十余年的发展演进,云计算有三条发展路径,并且最终沉淀下来了三...

    文章 云学习小组 2016-05-26 9811浏览量

  • 阳振坤:数据库天然选择了计算机,但计算机天然并不适合数据库

    小蚂蚁说: 2018年6月25日,清华大学计算机科学与技术系60周年系庆系列讲座第11场报告在清华大学东主楼举行。蚂蚁金服高级研究员、OceanBase负责人阳振坤在本次学术报告中发表了题为《OceanBase每秒处理25.6万笔支付的技术关键》的主题演讲。 阳振坤以行业趋势为切入点,对蚂蚁金服自...

    文章 兔子酱 2018-06-29 6199浏览量

  • 一文读懂大数据计算框架与平台

    1. 前言 计算机的基本工作就是处理数据,包括磁盘文件中的数据,通过网络传输的数据流或数据包,数据库中的结构化数据等。随着互联网、物联网等技术得到越来越广泛的应用,数据规模不断增加,TB、PB量级成为常态,对数据的处理已无法由单台计算机完成,而只能由多台机器共同承担计算任务。而在分布式环境中进行...

    文章 小旋风柴进 2017-05-02 2713浏览量

1 2 3 4 5 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT