• ceph-索引

    osd 故障测试(模拟常见故障)ceph OSD 故障记录(磁盘故障导致 osd down)ceph osd 故障后更换硬盘记录 ceph 故障分析(backfill_toofull)ceph 故障解决备忘(requests are blocked)ceph(requests are blocked)异常解决...
    文章 2017-02-17 1590浏览量
  • KV数据存储:内存篇

    额外问题:故障恢复 2)如何保证系统的平行扩展-多机存储->引发问题:数据如何分布 3)如何保证数据可用性-存储多份数据->引发问题:数据的一致性 本文转自 zhenjing 博客园博客,原文链接:...
    文章 2017-11-05 775浏览量
  • SAN LUN Mapping出错导致文件系统共享冲突的完美解决...

    SAN环境下此类故障较为常见,但多数是人为不小心导致,此故障也是如此。正常情况下,SAN分配出来的LUN是独占模式的,如果同时为几个操作系统所控制,极易导致写操作不互斥,导致文件系统一致性出错。如果要恢复此...
    文章 2017-06-19 1121浏览量
  • MySQL-常见的三种数据库存储引擎

    原文:MySQL-常见的三种数据库存储引擎 数据库存储引擎:是数据库底层软件组织,数据库管理系统(DBMS)使用数据引擎进行创建、查询、更新和删除数据。不同的存储引擎提供不同的存储机制、索引技巧、锁定...
    文章 2018-11-26 873浏览量
  • 2.0解析系列|OceanBase 2.0 之 索引实时生效

    生成索引表的元数据信息,其中索引表设置成只写状态,根据LSM Tree存储引擎的特点,索引表构建期间的数据直接写入到索引表的Memtable中,带来的好处是这部分数据直接成为索引表的一部分,后面无须再将这部分数据插入...
    文章 2018-11-02 1769浏览量
  • 对象存储架构所解决的文件遍历问题

    对象并不会像文件存储或NAS中的文件那样用索引来组织;相反,它们只需存储在非等级寻址空内(Fat Address Space)。对象的定位与操作经由其独特的识别符与元数据完成。这与传统的数据块存储截然不同,在块存储中,数据...
    文章 2017-07-03 1476浏览量
  • 《叶问》第8期

    高并发场景下,导致系统资源达到瓶颈,从而SQL执行慢5、大字段:当前表索引过多,或者写入大量的text类型数据6、硬件故障:因为磁盘、raid卡、内存等物理硬件故障导致写入慢7、磁盘资源耗尽:操作系统的磁盘、inode...
    文章 2018-11-29 1110浏览量
  • 从千万级数据查询来聊一聊索引结构和数据库原理

    对于这样的问题通常大家的第一反应就是看看sql是不是写的不合理啊诸如:“避免使用in和not in,否则可能会导致全表扫描”“避免在where子句中对字段进行函数操作”等等,还有一种常见的反应就是这个表有没有加索引?...
    文章 2020-03-26 1123浏览量
  • 浅谈MySQL存储引擎选择 InnoDB还是MyISAM

    决定使用什么样的存储引擎是一个很tricky的事情,但是还是值我们去研究一下,这 里的文章只考虑 MyISAM 和InnoDB这两个,因为这两个是最常见的。下面先让我们回答一些问题: 你的数据库有外键吗?你需要事务支持吗?你...
    文章 2017-11-12 953浏览量
  • HDFS 是如何实现大数据高容量、可靠的存储和访问的。

    首先我们来看下数据存储故障容错&xff0c;这块主要是磁盘介质&xff0c;存储数据可能会出现错乱&xff0c;这个HDFS主要会对存储在DataNode上的数据块&xff0c;计算并存储校验和&xff0c;并计算Datanode读取数据的校验和&xff0c;...
    文章 2021-08-27 82浏览量
  • 如何保障“双11”期间亿万买家和卖家愉快地聊天

    对应到业务侧,会有一张用户消息表存储该用户的所有消息,然后在这张表上,建立一张最近@我的消息的局部索引表,那么直接扫描该局部索引表,便可以得到 AT 该用户的所有消息,两张表结构分别如下图: 消息主表 消息...
    文章 2020-11-20 2540浏览量
  • Mysql学习之-Mysql存储引擎

    数据和索引存储在一起的并且存储在表空间中。但是默认情况下mysql会将数据库的所有InnoDB表存储在一个表空间中的。其实这种方式管理起来非常的不方便而且还不支持高级功能所以建议每个表存储为一个表空间实现方式为...
    文章 2017-11-14 1804浏览量
  • 如何保障“双11”期间亿万买家和卖家愉快地聊天

    对应到业务侧,会有一张用户消息表存储该用户的所有消息,然后在这张表上,建立一张最近@我的消息的局部索引表,那么直接扫描该局部索引表,便可以得到AT该用户的所有消息,两张表结构分别如下图: 消息主表 消息...
    文章 2020-11-23 2181浏览量
  • 存储技术体系

    存储节点出现故障时,需要能够自动检测到节点故障并将服务迁移到其他正常工作的节点。分布式存储层依赖一些基础服务,常见的包括分布式锁服务(例如Google Chubby系统),以及集群资源管理服务(例如Google Borg...
    文章 2018-04-20 3279浏览量
  • 参数嗅探(Parameter Sniffing)(2/2)

    其中造成这个问题的最常见原因是糟糕的索引设计,造成参数值传入后优化器在执行计划里选择了书签查找。如果这样的执行计划被缓存重用的话,你的I/O成本就会爆表。在生成环境中,我就看到因为这个原因就造成100GB的...
    文章 2015-06-10 779浏览量
  • 一种基于Lucene的实时搜索服务

    DUMP中心快速构建海量数据索引并回流索引文件到存储中心的过程,为在线搜索服务无缝扩容和线上故障快速恢复提供了数据来源基础。其他优化我们产品在solr和Lucene上做了很多优化来适应一些业务的需求,本文篇幅有限...
    文章 2018-01-26 5344浏览量
  • 分布式存储系统基础

    磁盘损坏时,将会丢失存储在上面的数据,因而,分布式存储系统需要考虑将数据存储到多台服务器,即使其中一台服务器磁盘出现故障,也能从其他服务器上恢复数据。对于磁盘数据错误,往往可以采用校验和机制来解决,...
    文章 2017-08-09 1639浏览量
  • mysql(4)=理论(索引,视图,存储过程,事务)

    索引是一个单独的、存储在磁盘上的数据库结构,它们包含着对数据表里所有记录的引用指针。问题9 索引的分类?普通索引和唯一索引 单列索引和组合索引 全文索引 空间索引 问题10 查询表中使用的存储引擎 mysql>...
    文章 2017-11-27 982浏览量
  • Page结构

    m_type=1,Page的类型,常见的类型是数据页和索引页: 1 – data page,用于表示:堆表或聚集索引的叶子节点 2 – index page,用于表示:聚集索引的中间节点或者非聚集索引中所有级别的节点 其他Page类型(系统页是...
    文章 2017-01-01 668浏览量
  • 2019年常见ElasticSearch面试题解析(上)

    这样做的好处:不至于数据量激增导致单个索引数据量非常大,接近于上线 2 的32 次幂-1,索引存储达到了 TB+甚至更大。一旦单个索引很大,存储等各种风险也随之而来,所以要提前考虑+及早避免。3.2 存储层面冷热数据...
    文章 2019-12-25 2324浏览量
  • 2020年MySQL数据库面试题总结(50道题含答案解析和...

    (5)主键索引采用聚集索引索引的数据域存储数据文件本身),辅索引的数据域存储主键的值;因此从辅索引查找数据,需要先通过辅索引找到主键值,再访问辅索引;最好使用自增主键,防止插入数据时,为维持 B+树结构...
    文章 2020-08-17 3360浏览量
  • 每秒7亿次请求,阿里新一代数据库如何支撑?

    常见物流业务场景,需要存储大量轨迹物流信息,并需根据多个字段任意组合查询条件交通监控业务场景,保存大量过车记录,同时会根据车辆信息任意条件组合检索出感兴趣的记录各种网站会员、商品信息检索场景,一般保存...
    文章 2019-12-11 1515浏览量
  • 万字干货|每秒7亿次请求,阿里新一代数据库如何支撑?

    常见物流业务场景,需要存储大量轨迹物流信息,并需根据多个字段任意组合查询条件 交通监控业务场景,保存大量过车记录,同时会根据车辆信息任意条件组合检索出感兴趣的记录 各种网站会员、商品信息检索场景,一般...
    文章 2019-12-11 653浏览量
  • 阿里云对象存储 OSS 可用性 SLA 技术揭秘

    OSS 提供了本地冗余存储(部署在一个 AZ)、同城冗余(部署在三个 AZ)存储类型,它们的逻辑架构相同,主要包含如下模块:女娲一致性服务、盘古分布式文件系统、OSS 元数据(有巢分布式 KV 索引)、OSS 服务端、网络...
    文章 2020-07-02 897浏览量
  • mysql面试问题总结

    redolog作为异常宕机或者介质故障后的数据恢复使用。 5.mysql如何解决幻读的&xff1f;innodb使用next-key lock解决幻读问题。insert into test(xid)values(1),(3),(5),(8),(11);由于xid上是有索引的&xff0c;该算法总是...
    文章 2021-08-24 44浏览量
  • ​Lindorm/HBase增强版技术解密|每秒7亿次请求,阿里...

    自动规避故障节点的并发三副本日志协议(Quorum-based write) 高效的批量组提交(Group Commit) 无碎片的高性能缓存—Shared BucketCache Memstore Bloomfilter 面向读写的高效数据结构 GC-Invisible内存管理 在线计算...
    文章 2019-12-12 1653浏览量
  • 每秒8.8亿次请求!让数据存得起,看得见-云原生多模...

    搜索引擎,面向海量文本、文档数据,具备全文检索、聚合计算、复杂多维查询等能力,同时可无缝作为宽表、时序引擎的索引存储,加速检索查询,适用于日志、账单、画像等场景,兼容开源Solr标准接口。文件引擎,面向...
    文章 2020-11-25 1747浏览量
  • 知其所以然|阿里分布式数据库X-DB如何实现Online DDL...

    DDL(Data Definition Language)是SQL的一类,主要作用是创建和更改数据的schema信息,最常见的操作包括:加减列、更改列类型、加减索引等。MySQL毫无疑问是最流行的开源单机数据库。熟悉MySQL的同学都知道,在5.5...
    文章 2019-07-28 1131浏览量
  • HBase读写路径的工作机制

    大型分布式系统中硬件故障常见,HBase 也不例外。设想一下,如果MemStore还没有刷写,服务器就崩溃了,内存中没有写入硬盘的数据就会丢失。HBase 的应对办法是在写动作完成之前先写入WAL。HBase 集群中每台服务器...
    文章 2016-04-21 2750浏览量
  • 2.0 解析系列|OceanBase 2.0 之 Flashback功能

    数据库产品作为信息系统的重要组成部分,除了要高效的处理用户请求,还需要保证在各种异常情况下故障业务7*24的持续可用和数据的零丢失,本文的主要目的是总结和回顾一下传统数据库的常见故障,并介绍一下OceanBase...
    文章 2018-11-02 1930浏览量
1 2 3 4 ... 16 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化