• Torus登场:CoreOS打造的新一代分布式存储系统

    本文讲的是Torus登场:CoreOS打造的新一代分布式存储系统,【编者的话】最近CoreOS推出来重量级产品Torus,专门为容器集群量身打造的分布式存储系统,可以为通过Kubernetes编排和管理的容器集群提供可靠可扩展的存储...
    文章 2017-09-21 1336浏览量
  • 区块链开发公司谈区块链有哪些算法

    分布式存储分布式存储是一种数据存储技术,通过网络使用每台机器上的磁盘空间,并将这些分散的存储资源构成一个虚拟的存储设备,数据分散的存储在网络中的各个角落。所以,分布式存储技术并不是每台电脑都存放完整...
    文章 2018-08-01 1307浏览量
  • 基于RabbitMQ消息队列的分布式事务解决方案-MQ分布式...

    介绍Rabbitmg用于解决分布式事务必须掌握的5个核心概念 一款分布式消息中间件,基于erlang语言开发,具备语言级别的高并发处理能力。和Spring框架是同一家公司。支持持久化、高可用 核心5个概念: Queue:真正存储数据...
    文章 2019-11-10 5162浏览量
  • 系统设计之——架构师职责和设计原则

    分布式存储系统的挑战不在于存储理论,而在于如何做出稳定运行且能够逐步进化的系统。2.设计原则 大规模分布式存储系统有一些可以参考的设计准则: 1)容错。服务器可能宕机,网络交换机可能发生故障,服务器时钟...
    文章 2018-11-18 2666浏览量
  • 盘古:阿里云飞天分布式存储系统设计深度解析

    在10月19日的云栖社区在线培训上,来自盘古团队的吴洋分享了《盘古:飞天分布式存储系统实践》。他主要从以下三个方面进行了分享:盘古是什么?盘古是用来解决什么问题的?盘古是怎么解决问题的?他主要介绍了盘古的...
    文章 2016-11-17 38983浏览量
  • 分布式存储系统

    分布式存储系统应该具备的能力 大数据同生活息息相关,大量数据的出现对分布式存储提出了更高的需求,具体表现为以下方面: (1)高可靠,这是存储系统需要满足的最关键需求,既要保证数据在读写过程中不能发生错误...
    文章 2017-05-21 10851浏览量
  • 存储-盘古,阿里云飞天分布式存储系统设计深度解析

    本文依据盘古团队的吴洋分享了《盘古:飞天分布式存储系统实践》视频整理而成。他主要从以下三个方面进行了分享:盘古是什么?盘古是用来解决什么问题的?盘古是怎么解决问题的?他主要介绍了盘古的分布式系统架构和...
    文章 2017-07-19 6687浏览量
  • 什么是分布式系统,这么讲不信你不会

    虽然本人在前面也写过好几篇分布式系统相关的文章,主要包括CAP理论、分布式存储与分布式事务,但对于分布式系统,并没有一个跟清晰的概念。分布式系统涉及到很多的技术、理论与协议,很多人也说,分布式系统是...
    文章 2019-12-03 1650浏览量
  • 分布式调用跟踪系统的设计和应用学习

    一、为什么需要分布式调用跟踪系统 随着分布式服务架构的流行,特别是微服务等设计理念在系统中的应用,业务的调用链越来越复杂, 可以看到,随着服务的拆分,系统的模块变得越来越多,不同的模块可能由不同的团队...
    文章 2016-07-28 9939浏览量
  • zookeeper 应用场景

    高可用的解决方案是:这份列表是分布式存储的,它是由存储这份列表的服务器共同管理的,如果存储列表里的某台服务器坏掉了,其他服务器马上可以替代坏掉的服务器,并且可以把坏掉的服务器从列表里删除掉,让故障...
    文章 2017-11-17 1017浏览量
  • 用大白话聊聊分布式系统

    在大数据和分布式存储方面,我们可以选择 Apache HBase、Apache Cassandra、Memcached、Redis、MongoDB等。在分布式监控方面,常用的技术包括Nagios、Zabbix、Consul、ZooKeeper等。当然,本文也只是抛砖引玉,不...
    文章 2017-03-05 5979浏览量
  • 一文读懂分布式架构知识体系(内含超全核心知识大图)

    分布式缓存系统提供了热点数据的随机访问机制,大大了提升了访问时间,但是带来的问题是如何保证数据的一致性,引入分布式锁来解决这个问题,主流的分布式存储系统基本就是 Redis 了。持久化:Redis 非持久化:...
    文章 2019-10-16 6659浏览量
  • CoreOS发起的友好兼容Kubernetes的存储系统:Torus

    当然,现在有一整套成熟的产品集来运行分布式存储系统,该系统提供了跨服务传播大量存储池的优势。Red Hat的工程师们一直在GlusterFS和Ceph开源文件系统努力工作,这两个系统都可以很容易被用来提供具有伸缩性的分布...
    文章 2017-10-11 1641浏览量
  • 阿里云对象存储 OSS 可用性 SLA 技术揭秘

    盘古 2.0 是自主研发的第二代分布式存储系统,在高性能、大规模、低成本等方面深度挖掘了系统的极限能力,支持更丰富的接入形态,进一步提升了系统的部署运维自动化智能化能力,同时继承了 1.0 在高可靠、高可用、...
    文章 2020-07-02 1108浏览量
  • 总监课第三期|深入解析数据存储技术原理及发展演进

    吴忠杰(储道),专注存储技术研发十多年,历经中科院计算所存储研究中心、EMC、Memblaze著名存储研发机构,从传统存储阵列、虚拟化集群存储、数据去重、闪存存储一直做到大规模分布式存储。长期从事存储前沿技术的...
    文章 2018-10-17 1705浏览量
  • 分布式调用跟踪系统的设计和应用

    一、为什么需要分布式调用跟踪系统 随着分布式服务架构的流行,特别是微服务等设计理念在系统中的应用,业务的调用链越来越复杂, 可以看到,随着服务的拆分,系统的模块变得越来越多,不同的模块可能由不同的团队...
    文章 2017-11-23 1129浏览量
  • 分布式存储系统基础

    对于磁盘数据错误,往往可以采用校验和机制来解决,这样的机制既可以在操作系统层面实现,又可以在上层的分布式存储系统层面实现。超时 由于网络异常的存在,分布式系统中请求结果存在“三态”的概念,即“成功”、...
    文章 2017-08-09 1649浏览量
  • 分布式链路追踪

    下面讲述一下在阿里云Kubernetes容器服务基础之上,如何快速搭建一套分布式追踪系统。准备Kubernetes环境 阿里云容器服务Kubernetes 1.9.3目前已经上线,可以通过容器服务管理控制台非常方便地快速创建 Kubernetes ...
    文章 2018-05-25 4287浏览量
  • 【独家】一文读懂非关系型数据库(NoSQL)

    CAP理论定义了分布式存储的根本问题,但并没有指出一致性和可用性之间到底应该如何权衡。于是出现了BASE理论,给出了权衡A与C的一种可行方案。2.3 权衡一致性与可用性-BASE理论 Base=Basically Available+Soft ...
    文章 2017-05-01 2013浏览量
  • Ceph分布式存储实战导读

    同时,本书也适合大学高年级本科生和研究生作为Ceph分布式存储系统或者云计算相关课程的参考书籍,能够带领你进入一个开源的分布式存储领域,深入地了解Ceph,有助于你今后的工作。如何阅读本书 由于Ceph是运行在GNU...
    文章 2017-05-02 3564浏览量
  • 区块链

    从数据的角度来看:区块链是一种分布式数据库(或称为分布式共享总账,DistributedShared Ledger),这里的“分布式”不仅体现为数据的分布式存储,也体现为数据的分布式记录(即由系统参与者来集体维护)。...
    文章 2018-04-16 827浏览量
  • 区块链技术原理

    从数据的角度来看:区块链是一种分布式数据库(或称为分布式共享总账,DistributedShared Ledger),这里的“分布式”不仅体现为数据的分布式存储,也体现为数据的分布式记录(即由系统参与者来集体维护)。...
    文章 2018-04-16 4223浏览量
  • 什么是分布式系统如何学习分布式系统

    最为常见的就是分布式存储中&xff0c;多个节点复杂存储同一份数据&xff0c;以此增强可用性与可靠性。同时&xff0c;Replication也会带来性能的提升&xff0c;比如数据的locality可以减少用户的等待时间。下面这种来自 ...
    文章 2022-01-15 7浏览量
  • 关于大型网站技术演进的思考(二)-存储的瓶颈(2)

    业务再接着的增长下去,数据量也会随之越来越大了,这样发展下去总有一天主库也会产生瓶颈了,那么接下来我们又该如何解决主库的瓶颈了?方法很简单就是我们要拆分主库的数据了,那么我该以什么维度拆分数据了?一个...
    文章 2017-11-15 1035浏览量
  • 分布式架构全方位立体无死角解析

    分布式存储中一般一份数据至少会有三个副本,允许不同节点间副本同步的延时就是软状态的体现。最终一致性(Eventual Consistency):最终一致性是指系统中的所有数据副本经过一定时间后,最终能够达到一致的状态。弱...
    文章 2019-10-12 6394浏览量
  • 几个典型场景的系统设计解决方案

    在Hadoop中,MapReduce作为分布计算框架,而HDFS作为底层的分布式存储系统,但MapReduce不是与HDFS耦合在一起的,完全可以使用自己的分布式文件系统替换掉HDFS。当前MapReduce有很多开源实现,如Java实现Hadoop ...
    文章 2016-05-05 3859浏览量
  • 【学习】粗懂大数据的基本概念,不涉及行业和具体技术

    存储分布式缓存、基于MPP的分布式数据库、分布式文件系统、各种NoSQL分布式存储方案,内存数据库等 (2)计算 Map Reduce、流计算、图计算…… (3)应用 HIVE,pig,mahout,Sqoop以及ETL工具,统计与报告工具等 ...
    文章 2017-11-09 1555浏览量
  • 《HBase权威指南》一1.3 非关系型数据库系统Not-Only...

    这就需要重新思考在类似BigTable的存储系统如何才能高效合理地存储数据。部分原则是采用反范式化模式,例如将数据复制到多张表中,这样在读取的时候就不需从多张表中聚合数据了。或者预先物化所需的视图,一次优化...
    文章 2017-05-02 2727浏览量
  • 仁人帮探索大数据技术

    以上的解决方案发现都没有办法来解决了,这个时候,就出现了一些更大的基于M/R分布式解决方案,如大数据技术生态体系中的Hadoop,Spark和Storm。他们是目前最重要的三大分布式计算系统,Hadoop常用于离线的复杂的...
    文章 2017-10-10 4014浏览量
  • net 大型分布式电子商务架构说明

    以上这些仅仅是目前公司根据业务发展需要使用的一些基础服务,当然很多公司也会根据自身的业务需求使用分布式存储,分布式搜索引擎等,也会根据自身对基础服务的可靠性要求,稳定性要求选择不同的开源基础服务框架...
    文章 2017-06-05 1760浏览量
1 2 3 4 ... 85 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化