• 从传统运维到云运维演进历程之软件定义存储(五)中

    运维小哥最初的梦想搭建一个Ceph存储集群,对接云服务,底层存储实现高可用的数据访问架构。在正式上线之前,需要将集群架构部署好,并对存储集群进行服务器断电、机架断电等数据高可用测试,这时候就需要Ceph灾备...
    文章 2017-11-13 1241浏览量
  • 常见的一致性哈希算法#Java实现

    通过对spymemcached与jedis等客户端源码的阅读对一致性哈希算法的Java实现进行调研: 1.使用TreeMap实现,TreeMap本身继承NavigatableMap,因此具备节点导航的特点 2.通过在内存中构建虚拟节点,每个物理节点存在160...
    文章 2016-07-27 2347浏览量
  • HDFS 是如何实现大数据高容量、可靠的存储和访问的。

    具体的实现是将数据进行分块后进行并行的存储以及冗余存储&xff0c;如下系统架构&xff1a;图中hdfs中有两个关键组件&xff0c;一个是Namenode负责对分布式文件系统元数据的管理&xff0c;存储了文件名、路径、副本数量、数据块...
    文章 2021-08-27 261浏览量
  • jeesz分布式架构-分布式高可用

    又是通过每一层的冗余+自动故障转移来综合实现的,具体的:(1)【客户端层】到【反向代理层】的高可用,是通过反向代理层的冗余实现的,常见实践是keepalived+virtual IP自动故障转移(2)【反向代理层】...
    文章 2017-03-16 1822浏览量
  • 究竟啥才是互联网架构“高可用”

    (1)【客户端层】到【反向代理层】的高可用,是通过反向代理层的冗余实现的,常见实践是keepalived+virtual IP自动故障转移;(2)【反向代理层】到【站点层】的高可用,是通过站点层的冗余实现的,常见实践是nginx...
    文章 2020-02-05 553浏览量
  • 常见的高可用MySQL解决方案

    在正常状态下,集群主节点将挂载存储进行数据读写,而当集群发生故障时,Heartbeat会首先通过一个仲裁设备将主节点挂载的存储设备释放,然后在备用节点上挂载存储,接着启动服务,通过这种方式实现数据的共享和同步...
    文章 2017-11-08 1438浏览量
  • 常见的高可用MySQL解决方案转载

    在正常状态下,集群主节点将挂载存储进行数据读写,而当集群发生故障时,Heartbeat会首先通过一个仲裁设备将主节点挂载的存储设备释放,然后在备用节点上挂载存储,接着启动服务,通过这种方式实现数据的共享和同步...
    文章 2017-11-23 1168浏览量
  • 表格存储如何实现高可靠和高可用

    表格存储如何实现高可靠和高可用表格存储如何实现跨区域的容灾 前言 本文会介绍一款分布式NoSQL如何实现数据高可靠和服务高可用,这是一款云上的NoSQL服务,叫做表格存储。对于分布式NoSQL,大家可能会想到很多名字...
    文章 2017-11-08 7888浏览量
  • 百度使用自主研发系统工具hdoctor 使SATA盘返修率低于...

    包括潜在故障扇区修复、文件系统坏块屏蔽、硬盘及阵列状态设置校正、硬盘状态未就绪或超时的处理、数据/硬件故障排除、盘符前后漂移复位等常见的运维故障处理。而在未使用hdoctor的情况下&xff0c;因业务稳定性要求&...
    文章 2021-11-10 80浏览量
  • 究竟啥才是互联网架构“高可用”

    (1)【客户端层】到【反向代理层】的高可用,是通过反向代理层的冗余实现的,常见实践是keepalived+virtual IP自动故障转移;(2)【反向代理层】到【站点层】的高可用,是通过站点层的冗余实现的,常见实践是nginx...
    文章 2019-08-08 586浏览量
  • 分布式存储系统基础

    当某个副本所在的存储节点出现故障时,分布式存储系统能够将服务切换到其他副本,从而实现自动容错。分布式存储系统通过将复制协议将数据同步到多个存储节点,并保证多个副本的数据一致性。同一份数据的多个副本往往...
    文章 2017-08-09 2163浏览量
  • 课程介绍|学习笔记

    传统存储在保证数据的安全性上的一些技术来保证数据的冗余以减少由于数据故障导致的数据丢失。2、云存储 OSS 的介绍和使用场景&xff0c;先介绍阿里云上常见的云存储产品和服务&xff0c;讲解 OSS 基本介绍以及它和自建的...
    文章 2022-11-21 18浏览量
  • 云原生存储系列文章(一):云原生应用的基石

    存储系统的可用性定义了在系统故障情况下访问数据的能力,故障可以是由存储介质、传输、控制器或系统中的其他组件造成的。可用性定义系统故障时如何继续访问数据,以及在部分节点不可用时如何将对数据的访问重新路由...
    文章 2020-07-24 728浏览量
  • KV数据存储:内存篇

    对每一条内存中的数据记录,要实现紧凑存储的关键:可识别的数据记录边界。常见方法:1)记录长度;2)使用唯一的记录终止符(比如文本文件的'')。使用场景的特殊限制:数据量基本不变;只读;可丢数据;定期更新等...
    文章 2017-11-05 893浏览量
  • 存储双活是好,但不能白白浪费了存储阵列软件

    但主机端直接连接存储实现存储双活是有条件的,这个条件就是:存储系统必须要内嵌双活,也就是将原本存储网关干的事情纳入到存储系统中去,这就是我们在前文中提到的“存储内嵌双活+CDP”的模式——咦?为什么要CDP...
    文章 2017-08-09 2704浏览量
  • 云原生存储系列文章(一):云原生应用的基石

    存储系统的可用性定义了在系统故障情况下访问数据的能力,故障可以是由存储介质、传输、控制器或系统中的其他组件造成的。可用性定义系统故障时如何继续访问数据,以及在部分节点不可用时如何将对数据的访问重新路由...
    文章 2020-06-12 1290浏览量
  • Docker生态系统系列之三:服务发现和分布式配置存储

    本文讲的是Docker生态系统系列之三:服务发现和分布式配置存储,【编者的话】本文介绍了服务发现与全局可读配置存储两部分内容,不仅介绍了工作原理和工作方式,也介绍了与之相关的故障检测、重配置和安全问题,最后...
    文章 2017-09-13 4138浏览量
  • 如何在单台虚拟主机与故障切换集群之间取舍?

    故障切换集群实施成本很高,因为需要购买许可虚拟软件以及服务器和共享存储阵列硬件。还要考虑支持及维护故障切换集群的费用。为避免与构建及维护hypervisor集群环境所带来的复杂性及巨大的成本,有必要考虑能否...
    文章 2017-08-02 1150浏览量
  • 阿里云的答案,以自研数据库POLARDB构筑云计算底层...

    手游爆款或者高峰假期旅游订单激增场景下,常导致系统后台压力瞬间增大,传统数据库系统架构下,很难实现快速应对,常见的计算力新增、存储扩容就往往需要几小时甚至几天,而现在,阿里云POLARDB只需短短几分钟。...
    文章 2017-09-26 2897浏览量
  • 阿里云对象存储 OSS 可用性 SLA 技术揭秘

    OSS 是分布式存储,由多台服务器组成,采用内部网络将多台服务器连通起来,通过数据中心的机柜级交换机、机柜间交换机、机房间交换机的分层设计实现冗余,即使某台网络设备故障,系统仍然能够正常工作。4)服务器。...
    文章 2020-07-02 1637浏览量
  • 对象存储的前世今生

    现在,无论成熟厂商还是新兴厂商的对象存储解决方案都已达到相当成熟度,使得IT部门开始考虑如何在自己企业中实现对象存储。对象存储在很多重要方面与SAN和NAS迥然不同,对存储管理员而言最显著的区别在于对象存储...
    文章 2017-08-02 1766浏览量
  • MySQL数据库的几种常见高可用方案

    共享存储实现了数据库服务器和存储设备的解耦,不同数据库之间的数据同步不再依赖于MySQL的原生复制功能,而是通过磁盘数据同步的手段,来保证数据的一致性。(1)SAN共享储存 SAN的概念是允许存储设备和处理器(服务器...
    文章 2017-04-25 13378浏览量
  • 关于负载均衡的一切

    除了负载均衡,服务连接池还能够实现故障转移、超时处理、限流限速、ID串行化等诸多功能。第四层:访问数据层 在数据量很大的情况下,由于数据层(db/cache)涉及数据的水平切分,所以数据层的负载均衡更为复杂一些...
    文章 2019-08-08 848浏览量
  • 深入浅出HBase实战

    HDFS是一种开源的分布式文件系统,基于常见商用硬件构建海量大规模存储集群,提供极低的存储成本,极大的存储容量支持。HDFS提供高可靠性的数据保障,通常采用三副本冗余存储数据到不同的机器来实现容灾备份能力。...
    文章 2022-09-14 43浏览量
  • Azure站点恢复服务:应用于数据与虚拟机复制

    应当整体实现故障转移的机器组,通常与单个应用程序相关;用于特定应用程序的多个机器之间的依赖性;使用PowerShell脚本程序或Azure自动化runbooks的自定义扩展。Azure站点恢复服务支持三种类型的故障转移:测试、计划...
    文章 2017-08-09 1142浏览量
  • 存储性能101:服务器、阵列与网络架构基础

    所有存储供应商都会提供衡量其产品性能的工具,甚至还能实现端到端的性能测试,显示出存储对整体应用系统性能的影响。通过这些工具,你还可以看出当前实时的性能和历史的性能数值——这对于持续改进存储系统性能而言...
    文章 2017-07-04 1501浏览量
  • 阿里云对象存储 OSS 发布全球第一可用性 SLA 背后的...

    OSS 是分布式存储,由多台服务器组成,采用内部网络将多台服务器连通起来,通过数据中心的机柜级交换机、机柜间交换机、机房间交换机的分层设计实现冗余,即使某台网络设备故障,系统仍然能够正常工作。服务器。OSS ...
    文章 2020-06-17 707浏览量
  • 存储技术体系

    存储节点出现故障时,需要能够自动检测到节点故障并将服务迁移到其他正常工作的节点。分布式存储层依赖一些基础服务,常见的包括分布式锁服务(例如Google Chubby系统),以及集群资源管理服务(例如Google Borg...
    文章 2018-04-20 3502浏览量
  • 全栈必备 存储基础

    常见存储引擎有:哈希存储引擎,B树存储引擎(磁盘索引节省内存)和 LSM树存储引擎(随机写转为顺序写)。分布式存储系统应用——云服务 分布式存储系统一般采用可扩展的系统结构,利用多台存储服务器分担存储负载...
    文章 2018-01-10 891浏览量
  • 10款常见MySQL高可用方案选型解读

    共享存储实现了数据库服务器和存储设备的解耦,不同数据库之间的数据同步不再依赖于MySQL的原生复制功能,而是通过磁盘数据同步的手段,来保证数据的一致性。SAN共享储存 SAN的概念是允许存储设备和处理器(服务器)...
    文章 2017-05-16 6125浏览量
1 2 3 4 ... 115 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化