db匠
db匠_个人页
db匠
文章
492
问答
0
视频
0
个人介绍
rds内核团队秘密研发的全自动卖萌机. 追加特效: 发数据库内核月报. 月报传送: http://mysql.taobao.org/monthly/
擅长的技术
-
发表了文章 2017-03-21
MySQL · 源码分析 · MySQL BINLOG半同步复制数据安全性分析
半同步复制（semisynchronous replication）MySQL使用广泛的数据复制方案，相比于MySQL内置的异步复制它保证了数据的安 全，本文从主机在Server层提交事务开始一直到主机确认收到备机回复进行一步步解析，来看MySQL的半同步复制是怎么保证数 据安全的。本文基于MySQL 5.6源码，为了简化本文只分析DML的核心的事务处理过程，并假定事务只涉及innodb存储引擎。
-
发表了文章 2017-03-21
MySQL · 实现分析 · 对字符集和字符序支持的实现
前言 在使用MySQL数据库的时候，常常会发现由于charset或collation设置不正确导致的各种问题。一方面由于数据在client和server之间传输需要做转换会导致CPU使用率增加；另一方面由于charset或collation设置的不一致在查询过程中无法使用索引而导致全表扫描。比如数据库的charset是utf8，collation是utf8_general_ci，而client或c
-
发表了文章 2017-03-21
MySQL · 新特性分析 · 5.7中Derived table变形记
Derived table实际上是一种特殊的subquery，它位于SQL语句中FROM子句里面，可以看做是一个单独的表。MySQL5.7之前的处理都是对Derived table进行Materialize，生成一个临时表保存Derived table的结果，然后利用临时表来协助完成其他父查询的操作，比如JOIN等操作。MySQL5.7中对Derived table做了一个新特性。该特性允许将符合
-
发表了文章 2017-03-21
MSSQL · 特性分析 · 列存储技术做实时分析
摘要 数据分析指导商业行为的价值越来越高，使得用户对数据实时分析的要求变得越来越高。使用传统RDBMS数据分析架构，遇到了前所未有的挑战，高延迟、数据处理流程复杂和成本过高。这篇文章讨论如何利用SQL Server 2016列存储技术做实时数据分析，解决传统分析方法的痛点。 传统RDBMS数据分析 在过去很长一段时间，企业均选择传统的关系型数据库做OLAP和Data Warehouse工作。这一
-
发表了文章 2017-03-21
MySQL · 性能优化 · MySQL常见SQL错误用法
前言 MySQL在2016年仍然保持强劲的数据库流行度增长趋势。越来越多的客户将自己的应用建立在MySQL数据库之上，甚至是从Oracle迁移到MySQL上来。但也存在部分客户在使用MySQL数据库的过程中遇到一些比如响应时间慢，CPU打满等情况。阿里云RDS专家服务团队帮助云上客户解决过很多紧急问题。现将《ApsaraDB专家诊断报告》中出现的部分常见SQL问题总结如下，供大家参考。 常见S
-
发表了文章 2017-03-21
PgSQL · 特性分析 · Write-Ahead Logging机制浅析
WAL机制简介 WAL即 Write-Ahead Logging，是一种实现事务日志的标准方法。WAL 的中心思想是先写日志，再写数据，数据文件的修改必须发生在这些修改已经记录在日志文件中之后。采用WAL日志的数据库系统在事务提交时，WAL机制可以从两个方面来提高性能： 多个client写日志文件可以通过一次 fsync()来完成 日志文件是顺序写的，同步日志的开销要远比同步数据页的开销
-
发表了文章 2017-03-21
MySQL · 引擎特性 · InnoDB IO子系统
前言 InnoDB做为一款成熟的跨平台数据库引擎，其实现了一套高效易用的IO接口，包括同步异步IO，IO合并等。本文简单介绍一下其内部实现，主要的代码集中在os0file.cc这个文件中。本文的分析默认基于MySQL 5.6，CentOS 6，gcc 4.8，其他版本的信息会另行指出。 基础知识 WAL技术 : 日志先行技术，基本所有的数据库，都使用了这个技术。简单的说，就是需要写数据块的时候，
-
发表了文章 2017-03-08
PgSQL · 应用案例 · GIN索引在任意组合查询中的应用
背景 很多人小时候都有一个武侠梦，独孤求败更是金庸武侠小说里的一位传奇人物。 纵横江湖三十馀载，杀尽仇寇奸人，败尽英雄豪杰，天下更无抗手，无可奈何，惟隐居深谷，以雕为友。 呜呼，生平求一敌手而不可得，诚寂寥难堪也。 独孤老前辈的佩剑描写非常有意思，从使用的佩剑，可以看出一个人的武功修为。 第一柄是一柄青光闪闪的无名利剑。「凌厉刚猛，无坚不摧，弱冠前以之与河朔群雄争锋。」 第二柄是紫薇软剑，
-
发表了文章 2017-03-08
SQL Server · 特性介绍 · 聚集列存储索引
摘要 微软在SQL Server 2012引入了列存储技术，使得OLAP和Data warehouse场景性能提升10X，并且数据压缩能力超过传统表7X。这项技术包含三个方面的创新：列存储索引、Batch Mode Processing和基于Column Segment的压缩。但是，SQL Server 2012列存储索引的一个致命缺点是列存储索引表会进入只读状态，用户无法更新操作。SQL Ser
-
发表了文章 2017-03-08
PgSQL · 应用案例 · 聚集存储 与 BRIN索引
背景 在现实生活中，人们的各种社会活动，会产生很多的行为数据，比如购物、刷卡、打电话、开房、吃饭、玩游戏、逛网站、聊天 等等。 如果可以把它当成一个虚拟现实（AR）的游戏，我们所有的行为都被记录下来了。 又比如，某些应用软件，在征得你的同意的情况下，可能会记录你的手机行为、你的运动轨迹等等，这些数据可能会不停的上报到业务数据库中，每条记录也许代表某个人的某一次行为。 全球人口非常多，每个人
-
发表了文章 2017-03-08
PgSQL · 源码分析 · PG优化器物理查询优化
在之前的一篇月报中，我们已经简单地分析过PG的优化器（PgSQL · 源码分析 · PG优化器浅析），着重分析了SQL逻辑优化，也就是尽量对SQL进行等价或者推倒变换，以达到更有效率的执行计划。本次月报将会深入分析PG优化器原理，着重物理查询优化，包括表的扫描方式选择、多表组合方式、多表组合顺序等。 表扫描方式 表扫描方式主要包含顺序扫描、索引扫描以及Tid扫描等方式，不同的扫描方式 Se
-
发表了文章 2017-03-08
MySQL · 新特性分析 · CTE执行过程与实现原理
众所周知，Common table expression(CTE)是在大多数的关系型数据库里都存在的特性，包括ORACLE, SQLSERVER,POSTGRESQL等，唯独开源数据库老大MySQL缺失。CTE作为一个方便用户使用的功能，原本是可以利用普通的SQL语句替代的，但是对于复杂的CTE来说，要模拟出CTE的效果还是需要很大的功夫。如果考虑性能那就更是难上加难了。2013年Guilhem
-
发表了文章 2017-03-08
SQL优化 · 经典案例 · 索引篇
Introduction 在这些年的工作之中，由于SQL问题导致的数据库故障层出不穷，下面将过去六年工作中遇到的SQL问题总结归类，还原问题原貌，给出分析问题思路和解决问题的方法，帮助用户在使用数据库的过程中能够少走一些弯路。总共包括四部分：索引篇，SQL改写篇，参数优化篇，优化器篇四部分，今天将介绍第一部分：索引篇。 索引问题是SQL问题中出现频率最高的，常见的索引问题包括：无索引，隐式转换。
-
发表了文章 2017-03-08
MySQL · 源码分析 · 词法分析及其性能优化
Table of Contents 1. 简介 2. 背景知识 3. 查找树的实现 3.1. 树的查找 3.2. 树的产生 4. 试试折半查找 5. 总结 简介 MySQL 支持标准的 SQL 语言，具体实现的时候必然要涉及到词法分析和语法分析。早期的程序可能会优先考虑手工实现词法分析和语法分析，现在大多数场合下都会采用工具来简化实现。MySQL、PostgreSQL 等
-
发表了文章 2017-03-08
MySQL · 挖坑 · LOCK_active_mi/LOCK_msp_map 优化思路
背景 在MySQL中Slave相关操作一直存在一把大锁——LOCK_active_mi (5.5及之前版本，以及MariaDB)，或LOCK_msp_map（5.6及之后的版本）。 在Slave操作中大家可能经常会遇到如下懵逼的操作： 线程1：STOP SLAVE；有事务要回滚，一直不结束，然后LOCK_active_mi一直被这个线程持有 线程2：SHOW SLAVE STATUS；拿
-
发表了文章 2017-03-08
MySQL · myrocks · myrocks之备份恢复
myrocks支持逻辑备份和物理备份，逻辑备份仍然采用mysqldump，物理备份采用自己开发的myrocks_hotbackup工具，传统的物理备份工具Xtrabackup不支持rocksdb。由于rocksdb的存储特性，myrocks不管是逻辑备份还是物理备份，与innodb的备份恢复均有较大差别。 逻辑备份 myrocks的mysqldump工具支持rocksdb的逻辑备份，其使用方式
-
发表了文章 2017-03-08
AliSQL · 开源 · Sequence Engine
Introduction 单调递增的唯一值，是在持久化数据库系统中常见的需求，无论是单节点中的业务主键，还是分布式系统中的全局唯一值，亦或是多系统中的幂等控制。不同的数据库系统有不同的实现方法，比如MySQL提供的AUTO_INCREMENT，Oracle，SQL Server提供SEQUENCE等。 在MySQL数据库中，如果业务系统希望封装唯一值，比如增加日期，用户等信息，AUTO_INCR
-
发表了文章 2017-03-08
TokuDB · 源码分析 · 一条query语句的执行过程
Mysql是基于代价cost来选择索引，如果一个表有好几个索引，optimizer会分别计算每个索引访问的代价，选择代价最小的索引进行访问，这个索引也被称为access path。 Pickup index Mysql在执行query语句的时候会在server层计算每个可选索引的代价，并选择代价最小的索引作为访问路径（access path）去引擎读取数据。 server层的handler类为
-
发表了文章 2017-03-08
MySQL · 特性分析 · 5.7 error log 时区和系统时区不同
问题描述 现象 5.6 和 5.7 时区设置相同，select now()也显示当前时间 5.7 error log 中时间和当前时间差8小时 问题分析 5.6 写 error log 函数如下 取时间的函数是localtime_r(&skr, &tm_tmp) 日志中时间和系统时区相同 static void print_buffer_to_file(e
-
发表了文章 2017-03-08
PgSQL · 乱入拜年 · 小鸡吉吉和小象Pi吉(PostgreSQL)的鸡年传奇
背景 我家有只小鸡鸡，它的名字叫吉吉。 吉吉有一位铁杆鸡友大象Pi吉哥哥（PostgreSQL）。 吉吉给大伙拜年啦，祝大家鸡年吉祥，新年新气息，与好鸡友大象哥哥愉快的玩耍，鸡情四射。 故事从吉吉和好鸡友大象哥哥偶遇的那天开始。 有一天，大象哥哥摆下国际象棋擂台，邀请各路英豪前来，就这样和吉吉偶遇啦。 《想挑战AlphaGO吗？先和PostgreSQL玩一玩?? Postgre
-
发表了文章 2017-03-08
SQL Server · 特性分析 · 2012列存储索引技术
摘要 MS SQL Server 2012首次引入了列存储索引（Columnstore Index）来加速数据分析（OLAP）和数据仓库（Data Warehouse）场景的查询，它主要是通过将数据按列压缩存储的方式来减少查询对磁盘IOPS开销和CPU开销，最终达到提升查询效率，降低响应时间的目的。当然，列存储索引也不是一把万能的钥匙，在SQL Server 2012版本中它有诸多非常严苛限制条件
-
发表了文章 2017-03-08
MySQL · 捉虫动态 · event_scheduler 慢日志记错
问题背景 最近遇到了 event_scheduler 在记录慢日志时的一个 bug，在这里分享给大家。 为了方便描述问题，先构造一个简单的 event，如下： delimiter // create event event1 on schedule every 5 second starts now() ends date_add(now(), interval 1 hour) do beg
-
发表了文章 2017-03-08
PgSQL · 引擎介绍 · 向量化执行引擎简介
摘要 本文为大家介绍一下向量化执行引擎的引入原因，前提条件，架构实现以及它能够带来哪些收益。 希望读者能够通过对这篇文章阅读能够对向量化执行引擎的应用特征与架构有一个概要的认识。 关键字 向量化执行引擎， MonetDB，Tuple， 顺序访问，随机访问， OLAP， MPP，火山模型，列存表，编译执行 背景介绍 过去的20-30年计算机硬件能力的持续发展，使得计算机的计算能力飞速提升。然后
-
发表了文章 2017-03-08
MongoDB · 特性分析 · 网络性能优化
从 C10K 说起 对于高性能即时通讯技术（或者说互联网编程）比较关注的开发者，对C10K问题（即单机1万个并发连接问题）应该都有所了解。『C10K』概念最早由 Dan Kegel 发布于其个人站点，即出自其经典的《The C10K problem》一文[1]。 于是FreeBSD推出了kqueue，Linux推出了epoll，Windows推出了IOCP。这些操作系统提供的功能就是为了解决C1
-
发表了文章 2017-03-08
PgSQL · 案例分享 · PostgreSQL+HybridDB解决企业TP+AP混合需求
背景 随着IT行业在更多的传统行业渗透，我们正逐步的在进入DT时代，让数据发挥价值是企业的真正需求，否则就是一堆废的并且还持续消耗企业人力，财力的数据。 传统企业可能并不像互联网企业一样，有大量的开发人员、有大量的技术储备，通常还是以购买IT软件，或者以外包的形式在存在。 数据的核心 - 数据库，很多传统的行业还在使用传统的数据库。 但是随着IT向更多行业的渗透，数据类型越来越丰富（诸如人像
-
发表了文章 2017-03-08
MySQL · myrocks · myrocks index condition pushdown
index condition pushdown Index condition pushdown(ICP)是直到mysql5.6才引入的特性，主要是为了减少通过二级索引查找主键索引的次数。目前ICP相关的文章也比较多，本文主要从源码角度介绍ICP的实现。讨论之前，我们先再温习下。 以下图片来自mariadb 引入ICP之前 引入ICP之后 再来看个例
-
发表了文章 2017-03-08
MySQL · 引擎特性 · InnoDB 同步机制
前言 现代操作系统以及硬件基本都支持并发程序，而在并发程序设计中，各个进程或者线程需要对公共变量的访问加以制约，此外，不同的进程或者线程需要协同工作以完成特征的任务，这就需要一套完善的同步机制，在Linux内核中有相应的技术实现，包括原子操作，信号量，互斥锁，自旋锁，读写锁等。InnoDB考虑到效率和监控两方面的原因，实现了一套独有的同步机制，提供给其他模块调用。本文的分析默认基于MySQL 5.
-
发表了文章 2017-03-08
PgSQL · 案例分享 · 递归收敛优化
背景 有一个这样的场景，一张小表A，里面存储了一些ID，大约几百个。 （比如说巡逻车辆ID，环卫车辆的ID，公交车，微公交的ID）。 另外有一张日志表B，每条记录中的ID是来自前面那张小表的，但不是每个ID都出现在这张日志表中，比如说一天可能只有几十个ID会出现在这个日志表的当天的数据中。 （比如车辆的行车轨迹数据，每秒上报轨迹，数据量就非常庞大）。 那么我怎么快速的找出今天没有出现的ID
-
发表了文章 2017-03-08
MySQL · 捉虫动态 · 5.6中ORDER BY + LIMIT 错选执行计划
问题描述 create table t1(id int auto_increment primary key, a int, b int, c int, v varchar(1000), key iabc(a,b,c), key ic(c)) engine = innodb; insert into t1 select null,null,null,null,null; insert into
-
发表了文章 2017-03-08
Redis · 最佳实践 · 阿里云Redis助力双11业务
双11如火如荼的结束了，阿里云Redis(ApsaraDB for Redis原KVStore)也圆满完成了双11Redis的保障工作。目前阿里云Redis提供了单机版本和集群版本的Redis。 单机版本Redis具有很高的兼容性，并且支持Lua脚本及地理位置计算。 集群版本具有大容量、高性能的特性，能够突破Redis单线程的单机性能极限。 阿里云Redis默认双机热备并提供了备份恢复支
-
发表了文章 2017-03-08
PgSQL · 案例分享 · PostgreSQL 性能诊断指南
背景 数据库的性能优化是一个非常经典的话题，数据库的优化手段以及优化的角度也各不相同。 例如，可以从OS内核、网络、块设备、编译器、文件系统、SQL、数据库参数、业务逻辑、源码等各个方面去进行优化。 但是如果在优化前了解瓶颈在什么地方，可以向打鼹鼠一样，先打大的，起到事半功倍的效果。 本文将针对Linux平台下的PostgreSQL服务，讲解如何诊断PostgreSQL 数据库服务的瓶颈，了
-
发表了文章 2017-03-08
TokuDB · 特性分析 · 导入数据大杀器：Loader
Loader简介 Loader设计思路是把<pk_key,pk_value>二元组缓存在内存中，对每个索引在后台计算索引key。等所有的数据插入操作完成后，对每个索引进行排序，最后用排好序的索引key数组建立FT文件。 创建FT的过程：依次创建每个叶子节点（leaf node）和中间节点（internal node）。最后维护元数据，这里包括index descriptor，bloc
-
发表了文章 2017-03-08
HybridDB · 最佳实践 · OLAP和OLTP一体化打造
HybridDB（基于Greenplum）经过长达四个月时间的公测，终于开始商业化的征程、为我们客户提供计算分析能力。 在这之前，我们团队做了许多技术、产品上的打磨，其中OSS的高效访问与处理是其中较为重要的一环。这个功能可以给用户在数据流转方面带来质的变化。 缘起 在传统的OLAP方案中，链路是比较长的，数据流转的代价较为高昂。而且往往常用的数据同步工具未必能够满足需求，复杂的分析在同步上
-
发表了文章 2017-03-08
PgSQL · 案例分享 · 从春运抢火车票思考数据库设计
背景 马上春节了, 火车票又到了销售旺季, 一票难求依旧。 抢火车票是很有意思的一个课题，对IT人的智商以及IT系统的健壮性，尤其是数据库的功能和性能都是一种挑战。 为什么这么说呢，我们一起来缕一缕。 一、铁路售票系统的需求 铁路售票系统最基本的需求包括 查询余票、余票统计、购票、车次变化、退票、改签、中转乘车规划 等。 每个需求都有各自的特点，例如 1. 查询余票属于一个
-
发表了文章 2017-03-08
SQL Server · 特性介绍 · 统计信息
SQL Server查询优化器对于执行计划成本的评估是基于数据库统计信息的。所以，数据库统计信息直接影响到数据库查询效率，是数据库系统快速响应，低延迟特性的幕后英雄，但是我们又经常忽视数据库统计信息的存在和维护，怀着为英雄正名和唤醒大家对幕后英雄尊重的目的写作这篇文章。 什么是统计信息 SQL Server查询优化器使用统计信息来评估表或索引视图的一个或多个列中值的分布，这个分布信息提供了用于创
-
发表了文章 2017-03-08
MySQL · myrocks · myrocks统计信息
概述 mysql查询优化主要是在代价统计分析的基础上进行的。合理的代价模型和准确的代价统计信息决定了查询优化的优劣。myrocks基于mysql5.6, 目前的代价模型依赖的主要因素是IO和CPU，mysql5.7及以上的版本代价模型做了较多改进，具体可以参考这里 IO主要跟数据量和缓存相关，而CPU主要跟参与排序比较的记录数相关。 因此mysql5.6的统计信息的指标主要是数据量和记录数。例
-
发表了文章 2017-03-08
MySQL · 引擎特性 · Infobright 列存数据库
简介 系统架构 存储引擎 优化器和执行器 数据装载和卸载 领域知识 查询优化 简单场景的示例 小结 存储结构 Data Pack Knowledge Node 数据压缩 总结 简介 Infobright 是一个面向 OLAP 场景的开源列
-
发表了文章 2017-03-08
PgSQL · 特性分析· JIT 在数据仓库中的应用价值
背景 近几年，分析型数据库中有项技术得到了广泛的应用。它就是 JIT(Just-in-time compilation)动态编译。还有一些相关名词 LLVM codegen 和这项技术相关。本文把这项技术做一个简单的分析，和大家分享。 一、JIT 是什么 长久以来数据仓库都是以高效的处理量数据的能力著称。随着硬件的发展，他们使用大量相关技术充分挖掘硬件的能力提高数据的吞吐量和处理效率。例如 SM
-
发表了文章 2017-03-08
PgSQL · GIS应用 · 物流, 动态路径规划
背景 双十一背后的技术系列文章 《聊一聊双十一背后的技术 - 分词和搜索》 每年双十一的交易额都创新高，今年也不例外，双十一几乎成了各种IT系统的大考，物流也不例外。 每次双十一快递几乎都被爆仓，但是随着技术的发展，今年，听说双十一刚过，小伙伴们的包裹差不多都收到了，今年的快递效率怎么如此之高呢? 今天，来给大家分享一下物流与背后的数据库技术，当然我讲的还是PostgreSQL, Gre
-
发表了文章 2017-03-08
MSSQL · 最佳实战 · 巧用COLUMNS_UPDATED获取数据变更
业务场景 在平时与数据库打交道的过程中，我们经常会有这样的疑惑：如何快速的获取数据变更记录呢？举个例子，搜索引擎要为外部客人提供快速准确的商品信息搜索功能，那么当有新的商品数据变更后，搜索引擎如何快速的发现这些新的变更数据呢？我们常见的两种做法： 全量更新 这种方法最为简单直接，反正不管三七二十一，搜索引擎每次全量拉取商品信息表所有数据，然后创建搜索索引，提供给外部客人查询。这种方法实现起来的确
-
发表了文章 2017-03-08
PgSQL · 特性分析 · PostgreSQL 9.6 让多核并行起来
背景 经过多年的酝酿（从支持work process到支持动态fork共享内存，再到内核层面支持并行计算），PostgreSQL 的多核并行计算功能终于在2016年发布的9.6版本中正式上线，为PG的scale up能力再次拔高一个台阶，标志着开源数据库已经攻克了并行计算的难题。 相信有很多小伙伴已经开始测试了。 在32物理核的机器上进行了测试，重计算的场景，性能程线性提升。 目前并行计算支
-
发表了文章 2017-03-08
PgSQL · 特性分析 · PostgreSQL 9.6 如何把你的机器掏空
背景 PostgreSQL 在向和纵向的扩展能力在开源数据库中一直处于非常领先的地位，例如今年推出的9.6，内置了sharding的功能，同时在scale-up的能力也有非常明显的提升，特别是在多核与高并发处理这块。 社区有同学在128核的机器上测试tpc-b的select only模式可以达到几百万的qps，机器的CPU资源被吃光光。 天下大势，分久必合，合久必分。谈了这么多年的shardi
-
发表了文章 2017-03-08
MySQL · 引擎介绍 · Sphinx源码剖析（一）
介绍 Sphinx是一个全文索引引擎，他被设计为可以非常简单方便的与各种数据库(mysql,PG…)进行交互。它提供了两种读取接口，a) sphinx自己实现的mysql协议的接口, SphinxQL。b) 各种语言客户端的接口,也就是native搜索API. c) 也可以直接通过mysql server的一个存储引擎插件来访问, SphinxSE. 接下来我们会有一些列文章来分析Sphinx
-
发表了文章 2017-03-08
MySQL · 引擎特性 · Column Compression浅析
前言 当用户的数据量比较大时，通常需要对数据进行压缩，以减少磁盘占用。InnoDB目前有两种方式来实现这一目的。 第一种是传统的数据压缩，通过指定row_format及key_block_size，能够将用户表压缩到指定的page size并进行存储，默认使用zlib。这种压缩方式使用比较简单，但也是诟病较多的， 代码陈旧，相关代码基本上几个大版本都没发生过变化，一些优化点还是从faceboo
-
发表了文章 2017-03-08
MySQL · TokuDB · rbtree block allocator
背景 Percona在今年8月引入了一个大patch “rb tree block allocation strategy”，使用变种的红黑树作为跟踪未使用block hole的数据结构。 Percona上对此介绍的连接（点击这里跳转到原文） 这个改进是基于percona内部性能测试和外部用户反馈，发现当TokuDB引擎在长时间写入压力比较大的场景下，随着时间增长写入性能会急剧下降；当采用s
-
发表了文章 2017-03-08
MySQL · myrocks · myrocks之事务处理
前言 mysql目前支持的事务引擎有innodb,tokudb。 rocksdb加入mysql阵营后，mysql支持的事务引擎增长至3个。 myrocks目前支持的事务隔离级别有read-committed和repeatable-read。 同innodb一样，myrocks也支持MVCC机制。 可以说，myrocks提供了很好的事务支持，能够满足的一般业务的事务需求。 sequence n
-
发表了文章 2017-03-08
PgSQL · 特性分析 · 金融级同步多副本分级配置方法
背景 对于金融级的应用场景，2个副本通常是不够的，用户可能会需要多个副本。 例如，一主4从，要求除了主以外，还需要2个同步的副本，其他可以为异步的副本。 另一方面，我们在使用数据库时，为了扩展读的能力，读写分离是比较常见的用法。 9.6以前的版本，同步复制是确保XLOG已经复制到备库，而不是已经在备库apply，虽然APPLY通常都很快，可能也在毫秒级别完成，但是以前没有apply级别的
-
发表了文章 2017-03-08
SQL Server · 最佳实践 · 参数嗅探问题
摘要 MSSQL Server参数嗅探既是一个涉及知识面非常广泛，又是一个比较难于解决的课题，即使对于数据库老手也是一个比较头痛的问题。这篇文章从参数嗅探是什么，如何产生，表象是什么，会带来哪些问题，如何解决这五个方面来探讨参数嗅探的来龙去脉，期望能够将SQL Server参数嗅探问题理清楚，道明白。 什么参数嗅探 当SQL Server第一次执行查询语句或存储过程（或者查询语句与存储过程被强制
-
发表了文章 2017-03-08
MySQL · 特性分析 · 直方图的实现与分析
直方图（Histogram）是 RDBMS 中提供的一种基础的统计信息，最典型的用途是估计查询谓词的选择率，以便选择优化的查询执行计划。常见的直方图种类有：等宽直方图、等高直方图、V-优化的直方图，MaxDiff 直方图等等。RDBMS 产品最初使用的直方图非常简单（只有一个桶），后来逐步演化到等宽直方图、等高直方图等。MariaDB 10.0.2 就已在 server 层实现了直方图功能，参考T
-
发表了文章 2017-03-08
PgSQL · 代码浅析 · PostgreSQL 9.6 聚合OP复用的优化分析
背景 聚合操作指将分组的数据聚合为一个结果输出。 聚合通常用在统计应用中，例如统计分组的最大值，最小值，记录数，平均值，方差，截距，相关性。 聚合也可能被用于文本分析或者图像分析等，例如最佳相似度，行列变换，聚合为数组或JSON，图像堆叠等。 因此聚合通常需要启动值，行的处理，以及结果的格式转换3个过程。 PostgreSQL的聚合也包含了以上三个过程，创建一个聚合函数的语法如下： CR
暂无更多信息
-
发表了文章
2018-10-22
PgSQL · 应用案例 · 相似人群圈选，人群扩选，向量相似 使用实践
-
发表了文章
2018-10-22
MySQL · RocksDB · TransactionDB 介绍
-
发表了文章
2018-10-22
MySQL · RocksDB · Level Compact 分析
-
发表了文章
2018-10-22
Database · 理论基础 · 关于一致性协议和分布式锁
-
发表了文章
2018-10-22
Database · 理论基础 · 数据库事务隔离发展历史
-
发表了文章
2018-10-22
Redis · lazyfree · 大key删除的福音
-
发表了文章
2018-10-22
MongoDB · 引擎特性 · 复制集原理
-
发表了文章
2018-10-22
MSSQL · 最佳实践 · 使用混合密钥实现列加密
-
发表了文章
2018-10-22
MySQL · 引擎特性 · Cost Model,直方图及优化器开销优化
-
发表了文章
2018-10-22
POLARDB · 最佳实践 · POLARDB不得不知道的秘密
-
发表了文章
2018-09-22
PgSQL · 应用案例 · PostgreSQL 图像搜索实践
-
发表了文章
2018-09-22
MySQL · myrocks · collation 限制
-
发表了文章
2018-09-22
Redis · 引擎特性 · 基于 LFU 的热点 key 发现机制
-
发表了文章
2018-09-22
MySQL · 案例分析 · RDS MySQL线上实例insert慢常见原因分析
-
发表了文章
2018-09-22
MongoDB · 引擎特性 · MongoDB索引原理
-
发表了文章
2018-09-22
MSSQL · 最佳实践 · 使用非对称秘钥实现列加密
-
发表了文章
2018-09-22
MySQL · RocksDB · Memtable flush分析
-
发表了文章
2018-09-22
MySQL · 引擎特性 · IO_CACHE 源码解析
-
发表了文章
2018-09-22
MySQL · 源码分析 · Innodb缓冲池刷脏的多线程实现
-
发表了文章
2018-09-22
MySQL · 引擎特性 · B+树并发控制机制的前世今生
滑动查看更多
暂无更多信息
暂无更多信息