• 女娲:阿里云分布式一致性协同服务架构详解

    这里的解决方案是基于分布式系统中解耦连接管理和基于消息通知的分布式缓存的机制,通过在中间引入一个Proxy代理层来代理客户端与后端的连接,聚合一些访问请求,更关键的是基于Proxy层,引入了对后端资源分配的概念...
    文章 2016-12-02 19892浏览量
  • 分布式系统架构技术分析(一)

    分布式数据库中,客户端并非直接访问底层的存储系统,而是使用结构化查询语言(SQL语言)访问数据库节点,再由数据库节点的 SQL 引擎翻译成针对底层存储系统的操作。一套分布式数据库往往会服务多个业务,分布式...
    文章 2019-08-03 1244浏览量
  • 分布式事务相关问题

    数据库分库分表之后,保证多个数据库之间的提交和回滚数据的一致性,如图,假设一个订单系统,订单数据库和调度数据库是分开的,如何保证订单库和调度库的一致性,就是所谓分布式事务,这里多说一句,单一数据库不...
    文章 2018-06-03 990浏览量
  • 用大白话聊聊分布式系统

    分布式系统还必须要保证可靠性和数据的一致性。概况起来,在设计分布式系统时,应考虑以下几个问题: 系统如何拆分为子系统?如何规划子系统间的通信?通信过程中的安全如何考虑?如何让子系统可以扩展?子系统的...
    文章 2017-03-05 5933浏览量
  • 什么是分布式系统,这么讲不信你不会

    假设这是一个对外提供服务的大型分布式系统,用户连接系统,做一些操作,产生一些需要存储的数据,那么在这个过程中,会遇到哪些组件、理论与协议呢 用一个请求串起来 用户使用Web、APP、SDK,通过HTTP、TCP连接到...
    文章 2019-12-03 1639浏览量
  • 分布式监控系统Zabbix3.2对数据库的连接数预警

    在前篇分布式监控系统Zabbix3.2监控数据库的连接数 中已经对数据库的端口3306进行了监控,可以看到数据库的连接数历史变化有高有低,那如果达到了数据连接数的阀值是不是主动通知给运维人员去检查问题呢,总不能...
    文章 2017-12-14 1530浏览量
  • 从 Elasticsearch 来看分布式系统架构设计

    上面介绍了 Elasticsearch 数据层的架构,以及副本策略带来的优势和不足,下面简单介绍了几种不同形式的分布式数据系统架构。分布式系统 第一种:基于本地文件系统的分布式系统 上图中是一个基于本地磁盘存储数据的...
    文章 2018-03-30 5554浏览量
  • MapReduce&Hadoop

    和持久化数据结构)Avro:一种序列化系统,用于支持高效、跨语言的RPC和持久化数据存储MapReduce:分布式数据处理模型和执行环境,运行于大型商用机集群HDFS:分布式文件系统,运行于大型商用机集群Pig:数据流语言和...
    文章 2017-12-16 1313浏览量
  • 分布式锁的几种实现方式~

    分布式的CAP理论告诉我们“任何一个分布式系统无法同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance),最多只能同时满足两项。所以,很多系统在设计之初就要对这三者...
    文章 2018-04-13 2526浏览量
  • ITDSD-4.分布式软件的定量分析

    只要硬盘不损坏到无法使用导致数据丢失,即使系统重起也不会导致系统无法使用。在一份由数据备份厂商backblaze提供的硬盘故障率报告[1]中指出。其使用最多的硬盘故障率为2.22%。可以通过使用硬盘阵列RAID0,在双硬盘...
    文章 2019-06-13 920浏览量
  • 带你读《存储漫谈Ceph原理与实践》第一章分布式存储...

    互联网公司的分布式存储系统由数量众多、成本低廉、高性价比的普通服务器通过网络连接而成&xff0c;其主要优势有以下3点。xff08;1&xff09;系统可获得更好的scaleout 能力互联网的业务发展速度快&xff0c;而且更加注重...
    文章 2021-10-18 10浏览量
  • 分布式架构全方位立体无死角解析

    分布式环境下,我们无法保证网络的正常连接和信息的传送,于是发展出了CAP/FLP/DLS这三个重要的理论:CAP:分布式计算系统不可能同时确保一致性(Consistency)、可用性(Availablity)和分区容忍性(Partition)。...
    文章 2019-10-12 6380浏览量
  • 5分钟让你了解 ZooKeeper 的功能和原理

    ZooKeeper 是一个高可用的分布式数据管理与协调框架。基于对ZAB算法的实现,该框架 能够很好地保证分布式环境中数据的一致性。也是基于这样的特性,使得 ZooKeeper 成为了 解决分布式一致性问题的利器。1.数据发布与...
    文章 2019-08-11 1420浏览量
  • 数据库必知词汇:分布式拒绝服务攻击(DDoS)

    分布式拒绝服务攻击可以使很多的计算机在同一时间遭受到攻击,使攻击的目标无法正常使用,分布式拒绝服务攻击已经出现了很多次,导致很多的大型网站都出现了无法进行操作的情况,这样不仅仅会影响用户的正常使用,...
    文章 2020-02-23 190浏览量
  • 一文读懂分布式架构知识体系(内含超全核心知识大图)

    分布式计算系统构建在分布式存储的基础上,充分发挥分布式系统数据冗余灾备,多副本高效获取数据的特性,进而并行计算,把原本需要长时间计算的任务拆分成多个任务并行处理,从而提高了计算效率。分布式计算系统在...
    文章 2019-10-16 6301浏览量
  • 学习分布式不得不会的ACP理论

    设计成CP的系统其实也不少,其中最典型的就是很多分布式数据库,他们都是设计成CP的。在发生极端情况时,优先保证数据的强一致性,代价就是舍弃系统的可用性。如Redis、HBase等,还有分布式系统中常用的Zookeeper也...
    文章 2018-07-21 2301浏览量
  • 阿里云Lindorm联合智臾科技发布 金融高频交易数据量化...

    可便捷地分析分布式数据。在单个节点上编写脚本后,无需编译和部署即可在整个集群上执行。流数据无缝集成流数据和数据库表。可以使用SQL查询本地流数据或分布式流数据。内置时间序列、横截面、异常检测以及响应式...
    文章 2021-06-11 248浏览量
  • 9种高性能可用高并发的技术架构

    分布式数据和存储:大型网站需要处理以P为单位的海量数据,单台计算机无法提供如此大的存储空间,这些数据库需要分布式存储。分布式计算:目前网站普遍使用Hadoop和MapReduce分布式计算框架进行此类批处理计算,其...
    文章 2017-11-30 2109浏览量
  • 分布式系统简介

    现在工作中发现大数据技术的底层还是分布式系统,那么重新拾起,总结下~ 一、分布式系统简介 分布式系统是若干独立计算机的集合,这些计算机对于用户来说就像是单个相关系统。这个定义包含了两方面的内容,第一方面...
    文章 2016-06-10 763浏览量
  • 72期:一分钟了解阿里云产品,看别人如何靠域名赚亿元

    云周刊 ...分布式调度系统 主要介绍阿里云飞天分布式调度、任务调度、资源调度以及容错机制,还有当前面临的集群规模调整问题,以及备受关注的安全与性能问题,最后为大家分享了分布式调度的发展方向。
    文章 2016-03-13 2864浏览量
  • MaxCompute复杂数据分布的查询优化实践

    先考虑一个流行的分布式数据库分类学: Shared Everything:区别于后两类,这一类基本不是分布式的。Shared Disk:数据库服务器可以横向扩展,他们本身没有存储器,通过SAN或NAS技术连接到后端同样可以横向扩展的统一...
    文章 2017-12-11 3549浏览量
  • MaxCompute复杂数据分布的查询优化实践

    先考虑一个流行的分布式数据库分类学: Shared Everything:区别于后两类,这一类基本不是分布式的。Shared Disk:数据库服务器可以横向扩展,他们本身没有存储器,通过SAN或NAS技术连接到后端同样可以横向扩展的统一...
    文章 2017-12-29 1880浏览量
  • 如何高效排查系统故障?一分钱引发的系统设计“踩坑”...

    (3)5s以内数据均被分布式锁拦截,无法提交。(4)经过5s后,系统B的分布式锁失效,此时事务仍在等待未提交。(5)6s时,流水2成功越过数据库查询幂等校验发起事务,此时流水1拿到数据连接,流水1和2两个事务同时...
    文章 2017-11-27 2933浏览量
  • 架构选型必读:集中式与分布式全方位优劣对比

    从架构设计来看,集中式系统的计算、存储都在一套硬件体系内,无需面对网络分区(网络无法连接)问题,能很容易实现高一致性,并通过存储的冗余和软硬件结合的高度优化,达到了较高的可靠性。但在可用性方面,由于...
    文章 2018-06-15 3247浏览量
  • NoSQL简单介绍

    分布式系统的核心理念是让多台服务器协同工作,完成单台服务器无法处理的任务,尤其是高并发或者大数据量的任务。分布式是NoSQL数据库的必要条件。分布式系统由独立的服务器通过网络松散耦合组成的。每个服务器都是...
    文章 2017-06-04 1556浏览量
  • 分布式事务开山之作——《深入理解分布式事务:原理与...

    分布式事务随着业务的快速发展,网站系统往往由单体架构逐渐演变为分布式、微服务架构,而对于数据库则由单机数据库架构向分布式数据库架构转变。此时,我们会将一个大的应用系统拆分为多个可以独立部署的应用服务,...
    文章 2021-10-24 281浏览量
  • PolarDB-X 私有协议:提升集群的性能和稳定性

    X作为阿里巴巴自主研发的云原生分布式数据库,通过将数据拆分到多个基于MySQL发展而来的存储节点DN,每个存储节点DN承担合适的并发、数据存储和计算负载,计算节点处理分布式逻辑,最终得到一个具有稳定可靠、高度...
    文章 2021-02-04 345浏览量
  • Java应用架构的演化之路

    描述:任何强大的单一服务器都满足不了大型系统持续增长的业务需求,数据库读写分离随着业务的发展最终也将无法满足需求,需要使用分布式数据库及分 布式文件系统来支撑。分布式数据库是系统数据库拆分的最后方法,...
    文章 2017-08-01 1252浏览量
  • MaxCompute有关优化复杂数据分布的实践

    先考虑一个流行的分布式数据库分类学: Shared Everything:区别于后两类,这一类基本不是分布式的。Shared Disk:数据库服务器可以横向扩展,他们本身没有存储器,通过SAN或NAS技术连接到后端同样可以横向扩展的统一...
    文章 2017-11-26 3525浏览量
  • 线性一致性与全序广播-《Designing Data-Intensive ...

    大多数分布式数据库至少提供了最终一致性,这意味着如果停止对数据库的写操作并等待一段时间,最终所有读请求将返回相同的值。但是,这是一个非常弱的一致性保证,所谓的一段时间并不确定。如果写入一个值,然后立即...
    文章 2018-02-19 1188浏览量
1 2 3 4 ... 132 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化