NoSQL数据库

标签 PostgreSQL , gist , sp-gist , gin , rum index , 模糊查询 , 搜索引擎 , token位置搜索 , pg_hint_plan , 自动优化 , 分词 , like '%xxx%' 背景 模糊查询，是一个需求量很大，同时也是一个对数据库来

在上篇Mongodump的archive（归档）模式原理解析中介绍过，Mongodump的archive（归档）模式产生的文件是将多个集合的数据通过一个Multiplexer多路复用混合在一起，因此对应在恢复的时候就需要有一个Demultiplexer来将数据进行解析，是一个多路复用的逆过程。对应.

本文是同学们进入阿里云等公司的hadoop内核研发岗位的一个指引，需要具备哪些要求，如果不具备则可以往这方面努力。

Redis与KV存储的融合可以在性能可接受的情况下以Redis协议提供巨量数据的存储服务。本文以ArDB为例介绍了Redis与KV存储(RocksDB)融合之编码方式。

介绍MongoDB最佳时间以及线上问题的案例分析

MongoDB 3.2.9 版本在 wiredtiger 上做了很多改进，但不幸的时，这个版本引入了一个新的 bug，持续大量 insert/update 场景，有一定的可能导致 wiredtiger 进入 deadlock，MongoDB 官方迅速的在3.2.10里修复了该问题，该版本在 wir.

标签 PostgreSQL , 12306 , 春节 , 一票难求 , 门禁广告 , 数组 , 范围类型 , 抢购 , 排他约束 , 大盘分析 , 广告查询 , 火车票

回滚（rollback）操作是MongoDB副本集发生一些异常主备切换后可能发生的现象。回滚操作会撤销在当前节点上已执行的一些修改操作。 什么时候会触发回滚 MongoDB副本集节点上有个同步线程，负责拉取需要同步的oplog。被拉取oplog的节点称作同步源。那么，要回滚，首先要有一个同步源。

在mongodb副本集的local库中，有一个replset.minvalid集合，这个集合正常情况下会记录一个OpTime，包含时间戳（ts）字段和选举任期（t，如果使用的v1选举协议）。有时候会有一些额外的字段，如『begin』、『doingInitialSync:true』等，如下，摘抄自m.

MongoDB数据建模小案例：朋友圈评论内容管理

大数据相关的场景比较多，常见的有：ETL（数据提取、转换、加载）、实时流式（监控报警、风控等）、机器学习（推荐引擎、用户画像等）、非结构化分析（视频、图片、语音、文本等）、海量大数据在线存储（HBase）、搜索及我们本文讲的OLAP。 其中OLAP（在线联机分析）在很多企业占住分析类的大部分。

工欲善其事，必先利其器，我们在使用数据库时，通常需要各种工具的支持来提高效率；很多新用户在刚接触 MongoDB 时，遇到的问题是『不知道有哪些现成的工具可以使用』，本系列文章将主要介绍 MongoDB 生态在工具、driver、可视化管理等方面的支持情况。 本文主要介绍 MongoDB 的一些可

工欲善其事，必先利其器，我们在使用数据库时，通常需要各种工具的支持来提高效率；很多新用户在刚接触 MongoDB 时，遇到的问题是『不知道有哪些现成的工具可以使用』，本系列文章将主要介绍 MongoDB 生态在工具、driver、可视化管理等方面的支持情况。 本文主要介绍 MongoDB 对各个语

MongoDB 生态 - 官方工具篇 工欲善其事，必先利其器，我们在使用数据库时，通常需要各种工具的支持来提高效率；很多新用户在刚接触 MongoDB 时，遇到的问题是『不知道有哪些现成的工具可以使用』，本系列文章将主要介绍 MongoDB 生态在工具、driver、可视化管理等方面的支持情况。

Redis是一个使用范围很广的NOSQL数据库，阿里云Redis同时在公有云和阿里集团内部进行服务，本文介绍了阿里云Redis双11的一些业务场景：微淘社区之亿级关系链存储、天猫直播之评论商品游标分页和菜鸟单据履行中心之订单排序。

IoT一直是雷声大雨点小，但是在今年的会议上无论是演讲篇幅还是披露的相关进展都在预示着一个新的时代的来临，IoT的爆发只是个时间的问题，等待的只是那个临门一脚，正如智能手机爆发的前夜

本篇文章主要讲下在Redis 3.0中对于近似LRU算法的优化

本文主要对Redis的协议进行简单介绍并提供了一种方法用于解析AOF文件

Redis作为最流行的Key-value数据库，近年来在游戏行业有着广泛的应用。阿里云云数据库Redis于2015年正式商业化，提供了全套的容灾切换、故障迁移、在线扩容、性能优化的数据库解决方案，同时也对游戏行业推出了许多便捷的功能。

Redis作为目前最流行的KV内存数据库，也实现了自己的`LRU`（`Latest Recently Used`）算法，在内存写满的时候，依据其进行数据的淘汰。但是，`Redis`为了节省内存使用，和通常的LRU算法实现不太一样，Redis使用了采样的方法来模拟一个`近似LRU`算法。

线上经常遇到用户想知道自己Redis实例内存使用情况，质疑内存占用量太高。为了不影响线上实例的使用，我们一般会采用bgsave生成dump.rdb文件，再结合redis-rdb-tools和sqlite来进行静态分析。

本文将对Redis内核单元测试框架进行基本的解析，并对如何编写测试用例进行基本的讲解。

Redis 3.2版本一个重大的更新是新增了GEO地理位置相关的命令。 ApsaraDB for Redis对地理位置的支持对应的版本也已经发布了，目前可以通过提工单升级版本来支持。

对于Redis服务，通常我们推荐用户使用长连接来访问Redis，但是由于某些用户在连接池失效的时候还是会建立大量的短连接或者用户由于客户端限制还是只能使用短连接来访问Redis，而原生的Redis在频繁建立短连接的时候有一定性能损耗，本文从源码角度对Redis短连接的性能进行了优化。

文章内容为2016年 PostgresSQL 中国用户会上分享内容，主要介绍 MongoDB 高可用、可扩展的分布式架构的演进过程。

此次发布的岗位均是 Hadoop、Spark、HBase、flink等底层引擎内核的研究机会，机会难得，小伙伴们赶紧尝试下。工作地点杭州、北京。简历发给我：dragon.caol@alibaba-inc.com

背景介绍 MongoDB 复制集里 Secondary 不断从主上批量拉取 oplog，然后在本地重放，以保证数据与 Primary 一致。同步原理参考MongoDB复制集同步原理解析 Secondary 拉取到一批 oplog 后，在重放这批 oplog 时，会加一个特殊的 Lock::ParallelBatchWriterMode 的锁，这个锁会阻塞所有的读请求，直到这批 oplog 重放完成。

本文主要介绍阿里云 MongoDB 数据库上客户遇到的问题，及相应的解决方案。

如果不了解 MongoDB Sharded Cluster 原理，请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding，你应该知道的 关于 sharding 迁移，会分3个部分来介绍，本文为第三部分 负载均衡及迁移策略 chunk 迁移流程 Balancer 运维管理 在前面2个部分里，介绍了 MongoDB sharding 的迁移策略以及 chunk 迁移的步骤，本文将主要介绍如何管理 Balancer，以更好的为业务服务。

如果不了解 MongoDB Sharded Cluster 原理，请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding，你应该知道的 关于 sharding 迁移，会分3个部分来介绍，本文为第二部分 负载均衡及迁移策略 chunk 迁移

如果不了解 MongoDB Sharded Cluster 原理，请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding，你应该知道的 关于 sharding 迁移，会分3个部分来介绍，本文为第一部分 负载均衡及迁移策略 chunk 迁移

MongoDB 可以通过 writeConcern 来定制写策略，3.2版本后又引入了 readConcern 来灵活的定制读策略。 readConcern vs readPreference MongoDB 控制读策略，还有一个 readPreference 的设置，为了避免混淆，先简单说明下

MongoDB 复制集里，主备节点间通过 oplog 来同步数据，Priamry 上写入数据时，会记录一条oplog，Secondary 从 Primary 节点拉取 oplog并重放，以保证最终存储相同的数据集。 oplog 主要特性 幂等性，每一条oplog，重放一次或多次，得到的结果是一样

使用 MongoDB 时，可能会遇到因为 mongod 连接数用满了，导致客户端无法连接的问题。mongod的最大连接数通过 net.maxIncomingConnections 指定，默认值为1000000，相当于没有限制，生产环境强烈建议根据实际需求配置，以避免客户端误用导致 mongod 负.

本文是对MongoDB 世界大会上『Life of a Sharded Write』主题分享的总结，这个分享很有意思，主要内容是介绍 MongoDB Sharded Cluster 里写操作的路由策略，以及config server变为复制集后面临的一些挑战。 如果不了解 Sharded Cl

背景 PostgreSQL 与大多数数据库一样，通过schema，逻辑上划分对象的归属，如图。 用户还可以参考《PostgreSQL 逻辑结构 和 权限体系 介绍》https://yq.aliyun.com/articles/41210 因为有了schema的概念，在访问数据库中的对象

背景 SSD以其良好的IOPS和读写带宽，正在逐渐取代原来的主流存储，成为企业存储市场的新宠。 在一些对存储IOPS和读写带宽需要较大的重要应用中，例如数据库，SSD的使用也越来越普遍。 但是SSD的寿命和写入量有关，如果没有规划好，可能会拉高故障率和成本。 另一方面，SSD还存