• Distributed Systems-一致性协议背景介绍及Paxos算法...

    读过一些论文,思考过一些问题,希望能把这个问题的背景,以及各种容错分布式一致性算法设计的逻辑和背景记录下来,当然,内容实在太多,最早得追溯到迪杰斯特拉对并发与分布式问题的讨论吧,所以这个系列准备以...
    文章 2016-03-08 1320浏览量
  • 互联网 Java 工程师进阶知识完全扫盲

    有几百万消息持续积压几小时,说说怎么解决?如果让你写一个消息队列,该如何进行架构设计啊?说一下你的思路。搜索引擎 es 的分布式架构原理能说一下么(es 是如何实现分布式的啊)?es 写入数据的工作原理是什么啊...
    文章 2018-12-07 2533浏览量
  • CAP原理

    传统数据库的分布式事务大多采用这种模式,众所周知XA事务最大的缺点就在于超时问题上,如果对一个资源管理器的事务提交操作因为网络原因等待,参与分布式事务其他节点都需要等待延时节点,致使系统变慢并最终导致不...
    文章 2021-09-15 315浏览量
  • 关于分布系统共识的思考

    有一个著名的 FLP不可能原理,即:在网络可靠、但允许节点失效(即便只有一个)的最小化异步模型系统中,不存在一个可以解决一致性问题的确定性共识算法FLP 不可能原理告诉我们,不要浪费时间为异步分布系统设计...
    文章 2021-12-26 94浏览量
  • 理解分布式一致性:拜占庭容错与PBFT

    理解分布式一致性:拜占庭容错与PBFT拜占庭问题拜占庭容错BFTPBFT&xff08;Practical Byzantine Fault Tolerance&xff09;why 3f&43;1&xff1f;PBFT 的优点PBFT 的缺点之前的几篇文章我们讲了分布式协议里面的Paxos协议和...
    文章 2022-04-24 90浏览量
  • Kubernetes 是不是下一个容错

    容错域是分布系统的一个区域&xff0c;当基础设施或网络服务的关键部分遇到问题时&xff0c;该区域会受到影响。Kubernetes 是否成为下一个容错域&xff1f;思考与 Kubernetes 相关的应用程序故障的灾难是 DevOps 的噩梦。但...
    文章 2022-08-20 35浏览量
  • 盘古:阿里云飞天分布式存储系统设计深度解析

    盘古是怎么解决问题的?他主要介绍了盘古的分布系统架构和设计理念。回顾视频:https://yq.aliyun.com/edu/lesson/play/392 本次视频直播的整理文章整理完毕,如下内容。盘古是什么?上图列举了目前主流的云计算...
    文章 2016-11-17 40644浏览量
  • 线性一致性与全序广播-《Designing Data-Intensive ...

    上一篇聊了聊构建分布式系统所面临的困难,这篇将着重讨论构建容错分布系统的算法与协议。构建容错系统的最佳方法是使用通用抽象,允许应用程序忽略分布式系统中的一些问题。本篇我们先聊一聊线性一致性,以及与...
    文章 2018-02-19 1279浏览量
  • 分布式一致性的想法

    业务开发的过程中,肯定会有我们维护的服务调用其他团队的服务,即使在机房内部进行网络调用,也或多或少的存在系统调用超时的现象,如果出现这样的现象,我们该怎么解决呢?解决一致性问题的思路 酸碱中和 ACID:酸...
    文章 2017-11-27 1524浏览量
  • 存储-盘古,阿里云飞天分布式存储系统设计深度解析

    盘古是怎么解决问题的?他主要介绍了盘古的分布系统架构和设计理念。上图列举了目前主流的云计算厂商,我们发现一个很有趣的事情:所有云计算厂商都是“富二代”,它们的分布式存储技术全部采用自研技术,而没有用...
    文章 2017-07-19 8264浏览量
  • RabbimMQ简单介绍

    怎么处理消息丢失情况,怎么保证消息传递的顺序性 3 一致性问题A系统处理完业务,通过MQ给B,C,D三个系统发消息数据,如果B系统,C系统处理成功,D系统处理失败,如何保证消息数据处理的一致性 使用MQ需要满足什么样的条件1...
    文章 2022-08-23 17浏览量
  • 分布式和集群区别?什么是云计算平台?分布式的应用...

    分布系统中,解决了负载均衡的问题后,另外一个问题就是数据的一致性了,这个就需要通过同步来保障。根据不同的场景和需求,同步的方式也是有选择的。在分布式文件系统中,比如商品页面的图片,如果进行了修改,...
    文章 2018-01-24 7402浏览量
  • 关于《谈谈分布系统的CAP理论》的几点看法

    CAP理论作为分布系统的基石&xff0c;应该是每个入门分布系统&xff08;包括区块链&xff09;的人都应该学习的内容&xff0c;本文是我在学习本理论的一个记录&xff0c;分享出来以节省大家查资料时间。2000年7月&xff0c;加州大学...
    文章 2022-08-19 38浏览量
  • 大白话讲解分布式里面的cap原则

    但是如果用户向G2服务器获取记录的时候,此时记录还是v0,这就有问题了,因为用户在两个服务获取的记录数据不同,这就是不一致性,怎么解决不一致性呢:我们可以在我们可以在 G1 写操作时,锁定 G2 的读操作和写操作...
    文章 2019-08-13 1427浏览量
  • 分布式大数据系统巧实现,全局数据调度管理不再难

    怎么解决在不同系统之间数据和计算在全局上的优化、管理和调度?前序知识 分布式文件系统 全局数据管理要解决的是存储的问题,而目前所有大数据系统的底层解决存储问题无一例外都是使用分布式文件系统(以下简称为...
    文章 2017-05-18 4620浏览量
  • 【ATF】钱正平:大规模实时计算及其在阿里的应用与...

    最新的一个工作,从实时计算容错复杂性问题根源来看,如果一个问题的根源来自上下游依赖、对状态依赖,从系统设计原则讲非常简单的想法应该尽量试图解耦:所谓分而治之来管理这一复杂性。事实上,上下游依赖可以通过...
    文章 2016-04-16 6385浏览量
  • 什么是分布系统,这么讲不信你不会

    Partition和Replication是解决分布系统问题的一记组合拳,很多具体的问题都可以用这个思路去解决。但这并不是银弹,往往是为了解决一个问题,会引入更多的问题,比如为了可用性与可靠性保证,引用了冗余(复制集)...
    文章 2019-12-03 1699浏览量
  • 《Akka应用模式:分布式应用程序设计实践指南》读书...

    容错绝对是分布系统最难搞定的事儿,至少我这样认为,因为意外总是会发生。处理故障在许多方面意味着要放弃全局一致性。Akka是基于不粗要调用方负责处理故障的想法而建立的。它主张由发生故障的actor负责处理问题...
    文章 2018-06-12 1522浏览量
  • 电商详情页系统实战(1)-简介

    以及毫秒级的实时热点缓存负载均衡降级如何解决分布系统中的服务高可用问题&xff1f;避免多层服务依赖因为少量故障导致系统崩溃基于hystrix的高可用缓存服务&xff0c;资源隔离&43;限流&43;降级&43;熔断&43;超时控制...
    文章 2021-12-06 36浏览量
  • 提效降本:蚂蚁金服如何用融合计算改造在线机器学习

    Ray上应该做怎么样的调度,衡量指标就是系统的效率问题系统的效率很多时候取决于计算和数据的组织方式,比如说我们要计算Add(a,b),首先这个函数在本地会被自动注册并且提供给本地调度器。之后通过全剧调度器和...
    文章 2019-11-01 2625浏览量
  • ClusterFS如何解决分布式文件系统的难题?

    解决副本存储占用率问题先说数据可靠性问题,副本因子为3个副本,这在不少的DFS系统中作为默认副本数量,这只是数据可靠性的一种策略,通过3副本的形式,提升数据可靠性,本质上就是提升了分布式环境数据的容错率,...
    文章 2021-12-31 172浏览量
  • 漫谈分布式与区块链

    实际上,一致性问题(consensus problem)是分布系统需要解决的一个核心问题分布系统一般是由多个地位相等的节点组成,各个节点之间的交互就好比几个人聚在一起讨论问题。让我们设想一个更具体的场景,比如三...
    文章 2018-02-04 3384浏览量
  • 加入R3联盟近半年,招商银行在区块链有何探索与实践?

    近半年的探索以后,周天虹表示,区块链的分布式共享帐本在能解决一些问题的同时,也会带来的隐私安全问题,“区块链解决了价值交换的问题,叫价值互联网。从去信任的角度来说,最重要的是两个机制:一个公私钥机制,...
    文章 2017-07-03 1392浏览量
  • 到底什么是集群&分布

    看了分布式服务框架Dubbo和分布式版本控制系统Git的这些描述后,细想一下,似乎和上面的“分布式:一个业务分拆多个子业务,部署在不同的服务器上,集群:同一个业务,部署在多个服务器上”的观点些相似。...
    文章 2016-05-26 2869浏览量
  • 微服务架构

    系统伸缩全靠堆机器,但也只能临时性的解决问题。当遇到这种情况时,那就需要用微服务架构来解决了。什么是微服务 在2014年Martin fowler提出了一种新的架构模式“微服务”,有兴趣的同学可以进去看看。文章地址:...
    文章 2019-08-04 1110浏览量
  • ZooKeeper 到底解决了什么问题

    ZooKeeper 特性ZooKeeper 解决的本质问题分布系统的一致性问题&xff1a;消息传递&xff1a;延迟性&xff0c;先发送的消息&xff0c;不一定先到达&xff1b;消息传递&xff1a;丢失性&xff0c;发送的消息&xff0c;可能丢失&xff1b;节点...
    文章 2021-12-16 92浏览量
  • 《精通VMware vSphere 6》——1.3 要求掌握的知识点

    vCenter Server能够管理ESXi,还包括其他一些功能,如vMotion、Storage vMotion、vSphere分布式资源调度器(DRS)、vSphere高可用性(HA)和vSphere容错(FT)。存储I/O控制(SIOC)和网络I/O控制(NetIOC)支持细致...
    文章 2017-05-02 1994浏览量
  • 数据库必知词汇:MapReduce

    能自动完成计算任务的并行化处理,自动划分计算数据和计算任务,在集群节点上自动分配和执行任务以及收集计算结果,将数据分布存储、数据通信、容错处理等并行计算涉及到的很多系统底层的复杂细节交由系统负责处理,...
    文章 2020-02-23 403浏览量
  • 分布式锁的几种实现方式~

    分布式的CAP理论告诉我们“任何一个分布系统都无法同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance),最多只能同时满足两项。所以,很多系统在设计之初就要对这三者...
    文章 2018-04-13 2747浏览量
  • 关于SpringCloud的那些知识点(1)

    不利于维护系统分布系统开发的成本高&xff08;容错&xff0c;分布式事务等&xff09;对团队挑战大总的来说优点大过于缺点&xff0c;目前看来Spring Cloud是一套非常完善的分布式框架&xff0c;目前很多企业开始用微服务、Spring ...
    文章 2022-05-11 21浏览量
1 2 3 4 ... 22 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化