• 关于

    分布式计算系统常见故障

    的搜索结果
  • 分布式系统架构技术分析(一)

    原创声明:本文系作者原创,谢绝个人、媒体、公众号或网站未经授权转载,违者追究其法律责任。 在 20 世纪 60 年代,大型主机凭借其超强的计算和 IO 处理能力以及在稳定性和安全性方面的卓越表现,在很长的一段时间里引领了计算机行业的发展。随着大型主机的发展,集中式的计算机系统架构也成为了主流。随...

    文章 初商 2019-08-03 997浏览量

  • 分布式系统架构技术分析(二)

    原创声明:本文系作者原创,谢绝个人、媒体、公众号或网站未经授权转载,违者追究其法律责任。 在前一篇《分布式系统架构技术分析(一)》中,我们已经对分布式系统的主要特征、组成要素及运行机制进行了初步的分析。当然,真实构建和运行一个分布式系统涉及的细节要比文章中阐述的复杂很多,如何保障大型分布式系统的...

    文章 初商 2019-08-03 559浏览量

  • 《分布式系统:概念与设计》一2.5 小结

    2.5 小结 如2.2节所展示的,从底层物理特性角度,例如,系统的规模、系统内在的异构性、从特性角度(如安全)提供端到端解决方案的实际需求等,分布式系统的复杂性正在增加。这使得从模型角度理解和探讨分布式系统显得更加重要。本章考虑了底层物理模型,并深度考察了支撑分布式系统的体系结构模型和基础模型。本...

    文章 华章计算机 2017-08-01 704浏览量

  • 《分布式系统:概念与设计》一1.1 简介

    1.1 简介 计算机网络无处不在。互联网也是其中之一,因为它是由许多种网络组成的。移动电话网、协作网、企业网、校园网、家庭网、车内网,所有这些,既可单独使用,又可相互结合,它们具有相同的本质特征,这些特征使得它们可以放在分布式系统的主题下来研究。本书旨在解释影响系统设计者和实现者的连网的计算机的特...

    文章 华章计算机 2017-08-01 896浏览量

  • 当 Messaging 遇上 Jepsen

    分布式系统面临的挑战 Is it better to be alive and wrong or right and dead?随着计算机技术的发展,系统架构从集中式演进到分布式。分布式系统相对于单台机器来说提供了更好的可扩展性,容错性以及更低的延迟,但在单台计算机上运行软件和分布式系统上运行软件...

    文章 中间件小哥 2019-11-22 4750浏览量

  • 分布式计算的重要原则--CAP理论

    在分布式计算技术的设计和实现中,CAP理论是一个重要的指导原则,其基本内容如下: 1、“C”是指一致性,即当一个Process(过程)修改了某个数据后,其他Process读取这是数据是,得到的是更新后的数据,但并不是所有系统都可以做到这一点。例如,在一些并非严格要求一致性的系统中,后来的Proce...

    文章 技术小甜 2017-11-16 848浏览量

  • 分布式大数据系统巧实现,全局数据调度管理不再难

    背景 看到这个题目,我们会有很多疑问:什么是分布式大数据系统中的全局数据管理?为什么要从全局对数据进行管理?这种对数据从全局进行分布和调度的策略是在什么样的背景下产生的?如果我们不解决全局数据管理的问题,分布式大数据系统中将会面临一些什么样的风险? 总的来说:基于大数据,云计算的需求,加快了分布式...

    文章 大数据史记 2017-05-18 4272浏览量

  • 提升 10 倍!阿里云对象存储 OSS 可用性 SLA 技术揭秘

    一 概述 阿里云对象存储 OSS 通过十年积累的技术红利,长期在双十一淘宝应用如丝般顺滑体验需求的打磨下,2020 年 6 月将可用性 SLA 提升 10 倍,其中 OSS 标准型(同城冗余)存储,SLA 从 99.95% 提升到 99.995%,简单理解能支持 10 万张图片最多只有 5 个显...

    文章 茶什i 2020-07-02 587浏览量

  • 《循序渐进学Spark》一第1章

    本节书摘来自华章出版社《循序渐进学Spark》一书中的第1章,第1.1节,作者   小象学院 杨 磊 更多章节内容可以访问云栖社区“华章计算机”公众号查看。  第1章 Spark架构与集群环境 本章首先介绍Spark大数据处理框架的基本概念,然后介绍Spark生态系统的主要组成部分,包括Spar...

    文章 华章计算机 2017-05-02 2210浏览量

  • 开发者看这里|OceanBaseDev Meetup#1 上海站「深入分布式数据库」

    近几年,越来越多的传统企业面临互联网化,IOT、区块链、AI、5G 等技术也在高速发展,任何一个技术的推广到成熟都会带来数据量的指数级增长,都会对存储带来巨大的冲击。相信随着这些技术的突破,未来越来越多的核心场景会走向分布式的领域。国内很多团队也在进行分布式数据库的探索与实践。 INCLUSION...

    文章 荔子liqi 2020-09-14 185浏览量

  • 收藏!一张图帮你快速建立大数据知识体系

    前言 最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”数据,让一切有迹可循,让一切有源可溯。我们每天都在产生数据,创造大数据和使用大数据...

    文章 茶什i 2020-06-11 9451浏览量

  • 架构选型必读:集中式与分布式全方位优劣对比

    应用现状比较 由于历史原因,集中式架构多用于传统银行、电信等行业。主机资源集中在大型主机或小型机上。集中式架构下,包括操作系统、中间件、数据库等“基础软件” 均为闭源商用系统。集中式架构的典型案例是 IOE(IBM、 Oracle、EMC)提供的计算设备、数据库技术和存储设备共同组成的系统。 近年...

    文章 技术小能手 2018-06-15 2944浏览量

  • 一致性哈希算法应用与分析

      一致性哈希算法主要使用在分布式数据存储系统中,按照一定的策略将数据尽可能均匀分布到所有的存储节点上去,使得系统具有良好的负载均衡性能和扩展性。感觉一致性哈希与数据结构中的“循环队列”还是有一点联系的。 1.简单哈希算法   哈希(hash)计箅是常见的数据分布技术,其通过求模运算来计算哈希值,...

    文章 旭东的博客 2013-09-02 656浏览量

  • 五分钟了解一致性的分类及其理论

    1、强一致性 这种一致性级别是最符合用户直觉的,它要求系统写入什么,读出来的也会是什么,用户体验好,但实现起来往往对系统的性能影响大。 2、弱一致性 这种一致性级别约束了系统在写入成功后,不承诺立即可以读到写入的值,也不久承诺多久之后数据能够达到一致,但会尽可能地保证到某个时间级别(比如秒级别)后...

    文章 colincheng 2017-03-27 733浏览量

  • 说说分布式文件存储系统

          分布式文件存储系统主要被分为三种类型:分布式文件存储、块存储、对象存储。这三种存储系统都有着自己的特点和适用场景。 其中分布式文件存储和对象存储是联系非常紧密的,大多对象存储系统都是在分布式文件系统基础上实现的。 很幸运自己在过去的工作中对这三种系统都有过或深或浅的接触,因此有了想...

    文章 boxti 2017-08-02 2199浏览量

  • 女娲:阿里云分布式一致性协同服务架构详解

    摘要:在11月24日阿里云·云栖社区组织的飞天系列培训上,来自阿里云女娲团队的存储专家朱云锋分享了《女娲:阿里云高性能、高可扩展的分布式一致性协同服务》。 他的演讲内容主要分为四个方面:分布式协同服务背景、女娲服务架构以及技术演进、典型女娲服务应用场景分享、全球化架构下的女娲进化,下面是本次分享内...

    文章 场景研读 2016-12-02 19109浏览量

  • 《Hadoop大数据分析与挖掘实战》——2.1节概述

    本节书摘来自华章社区《Hadoop大数据分析与挖掘实战》一书中的第2章,第2.1节概述,作者张良均 樊哲 赵云龙 李成华 ,更多章节内容可以访问云栖社区“华章社区”公众号查看 2.1 概述2.1.1 Hadoop简介Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。Hadoop以分...

    文章 华章计算机 2017-05-02 1626浏览量

  • 阿里云对象存储 OSS 发布全球第一可用性 SLA 背后的技术体系

    一、概述2020年6月,阿里云对象存储 OSS 通过十年积累的技术红利,将可用性 SLA(Service Level Agreement) 提升 10 倍,做到了全球第一的核心竞争力,是其他的云厂家的 10~20 倍,如下图所示。其中, OSS 的标准型(同城冗余)存储,SLA 从 99.95% ...

    文章 阿里巴巴存储技术 2020-06-17 226浏览量

  • 分布式与集群的联系与区别

    集群是一组协同工作的服务实体,用以提供比单一服务实体更具扩展性与可用性的服务平台。在客户端看来,一个集群就象是一个服务实体,但事实上集群由一组服务实体组成。与单一服务实体相比较,集群提供了以下两个关键特性:先说区别:一句话:分布式是并联工作的,集群是串联工作的。1:分布式是指将不同的业务分布在不同...

    文章 马哥Linux 2019-08-13 675浏览量

  • HADOOP生态圈知识概述

    一. hadoop 生态概况 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。 Hadoop的核心是YARN,HDFS和Mapreduce 下图是hado...

    文章 技术小甜 2017-11-15 1294浏览量

  • 《分布式系统:概念与设计》一1.5 挑战

    1.5 挑战 1.2节的例子试图说明分布式系统的范围,并提出在设计中出现的问题。在许多系统中,遇到了重大的挑战并且已经得到解决。随着分布式系统的应用范围和规模的扩展,可能会遇到相同的和其他的挑战。本节我们描述主要的挑战。 1.5.1 异构性 互联网使得用户能在大量异构计算机和网络上访问服务和运行应...

    文章 华章计算机 2017-08-01 1039浏览量

  • 《Storm企业级应用:实战、运维和调优》——1.1 什么是实时流计算

    本节书摘来自华章计算机《Storm企业级应用:实战、运维和调优》一书中的第1章,第1.1节,作者:马延辉 陈书美 雷葆华著, 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.1 什么是实时流计算 所谓实时流计算,就是近几年由于数据得到广泛应用之后,在数据持久性建模不满足现状的情况下,急...

    文章 华章计算机 2017-07-03 2195浏览量

  • 伏羲—阿里云分布式调度系统

    今天,大数据已经从概念发展到在很多行业落地生根。广泛用在电商、金融、企业等行业,帮助行业分析数据、挖掘数据的价值。即使在传统的医疗、安全、交通等领域也越来越多的应用大数据的技术。数据、价值二者之间的联系是计算,计算是大数据中最核心的部分。大数据计算就是将原来一台台的服务器通过网络连接起来成为一个整...

    文章 场景研读 2016-12-21 16470浏览量

  • 分布式与集群的区别

    简单说,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。   例如:   如果一个任务由10个子任务组成,每个子任务单独执行需1小时,则在一台服务器上执行改任务需10小时。   采用分布式方案,提供10台服务器,每台服务器只负责处理一个子任务,不考...

    文章 王爵nice 2016-05-14 3846浏览量

  • 数据中台建设方法论实践之技术选型

    数据中台解决方案包含:数据中台建设方法论、相关技术体系和工具、数据体系等几大部分构成,前文介绍了数据建设方法论中的数据仓库建设部分,本文将介绍具体构建数仓的相关技术。大数据技术肇始于Google,涉及到的相关技术包含数据采集交换技术,面向ETL的计算技术,面向数据查询分析的计算技术。本文主要介绍面...

    文章 悠朝 2020-03-09 909浏览量

  • 表格存储如何实现高可靠和高可用

    系列文章 表格存储如何实现高可靠和高可用表格存储如何实现跨区域的容灾 前言 本文会介绍一款分布式NoSQL如何实现数据高可靠和服务高可用,这是一款云上的NoSQL服务,叫做表格存储。对于分布式NoSQL,大家可能会想到很多名字,比如HBase、Cassandra,AWS的DynamoDB等,这类N...

    文章 亦征 2017-11-08 7295浏览量

  • Memcache 分布式高可用集群介绍

    分布式缓存需考虑如下三点: 1、缓存本身的水平线性扩展的问题。 2、缓存大病罚下的本身性能问题。 3、避免缓存的单点鼓掌问题。 分布式缓存存在的问题: 1、内存本身的管理问题。内存的分配,管理和回收机制。 2、分布式管理和分布式算法。 3、缓存键值管理和路由。 常见分布式算法         ...

    文章 科技小毛 2017-10-13 1145浏览量

  • 网站架构模式

    模式描述对重复发生时间的通用解决方案的核心。 模式的价值在于可重复性。 网站架构模式 为了解决高并发访问,海量数据,高可靠运行,提出了很多解决方案实现高性能,高可用,易伸缩,可扩展,安全等技术架构。 分层 横向分成, mvc, 视图,业务,数据库层 进制跨层调用 会给以后的...

    文章 机械键盘 2015-10-09 1270浏览量

  • Apache Flink 是什么?

    Apache Flink 是一个框架和分布式处理引擎,用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行,并能以内存速度和任意规模进行计算。 接下来,我们来介绍一下 Flink 架构中的重要方面。 处理无界和有界数据 任何类型的数据都可以形成一种事件流。信用卡交易...

    文章 阿里云实时计算Flink 2020-07-01 4173浏览量

  • 到底什么是集群&分布式

    版权声明:本文为博主原创文章,转载注明出处http://blog.csdn.net/u013142781 对于楼主这样工作一年的菜鸟,偶尔会看到一些文章标题带有“分布式”“集群”关键字,然后就懵逼了。最近对这些概念进行了一定的了解,整理了一下思路,在这里分享给各位猿友。不足之处还望纠正,感谢...

    文章 ghost丶桃子 2016-05-26 2314浏览量

1 2 3 4 ... 22 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT