NoSQL数据库

Apache Spark Delta Lake 写数据使用及实现原理代码解析 Delta Lake 写数据是其最基本的功能，而且其使用和现有的 Spark 写 Parquet 文件基本一致，在介绍 Delta Lake 实现原理之前先来看看如何使用它，具体使用如下： df.

Apache Spark Delta Lake 事务日志实现源码分析 我们已经在这篇文章详细介绍了 Apache Spark Delta Lake 的事务日志是什么、主要用途以及如何工作的。那篇文章已经可以很好地给大家介绍 Delta Lake 的内部工作原理，原子性保证，本文为了学习的目的，带领大家从源码级别来看看 Delta Lake 事务日志的实现。

深入理解 Apache Spark Delta Lake 的事务日志 事务日志是理解 Delta Lake 的关键，因为它是贯穿许多最重要功能的通用模块，包括 ACID 事务、可扩展的元数据处理、时间旅行（time travel）等。

本文先回顾锁的概念，再介绍分布式锁，以及如何用Redis来实现分布式锁。

HTAP是近些年来比较火的一个概念，本文将聊聊HTAP的前世今生及技术特点。

前言 Cassandra是一款去中心化的分布式数据库。一份数据会分布在多个对等的节点上，即有多个副本。我们需要定期的对多个副本检查，看是否有不一致的情况。比如因为磁盘损坏，可能会导致副本丢失，这样同一份数据的多个副本就会出现不一致。

5个选择Apache Cassandra 而非DynamoDB的原因

cassandra-stress是cassandra自带的压测工具，可以针对具体的表schema设计，模拟各种负载情况，测试集群的读写性能。这个工具功能十分强大，但是网上能找到的（中文）资料并不多，尤其是对yaml配置文件的介绍很少。

本文以 阿里云Cassandra为例子，推荐使用下 https://tableplus.com/ 数据库管理工具（笔者及社区跟tableplus没有任何商业关系，纯粹推荐），另外，阿里云的DMS后续也会支持阿里云Cassandra，敬请关注。

时间和空间的完美统一！阿里云时空数据库正式商业化 经过一段时间公测，得到广大客户的热烈支持，阿里云时空数据库已经于2019年9月10日正式商业化售卖！ 产品介绍 时空数据库能够存储、管理包括时间序列以及空间地理位置相关的数据。

金融账户系统的特点是并发量大、响应快、交易金额大，热点账户问题突出。本文将通过介绍宜信支付结算账户系统的体系与架构，分析金融账户系统如何在保证资金安全的前提下，解决以上问题。

介绍cassandra的gossip系列之一

sstableloader是cassandra提供的bulkload工具，可以将sstable文件导入到集群中。本文详细介绍其用法和实现原理。 用法 sstableloader工具在cassandra的bin目录下面，用法如下： bin/sstableloader

翻译原文：https://academy.datastax.com/planet-cassandra/mysql-to-cassandra-migration原作者：Michael Kjellman is a San Francisco based Software Engineer.

背景 最近压测Cassandra的时候，发现一个Cassandra进程一直没有完成初始化。经过排查后发现是死锁问题，这篇文章将会带领大家回顾整个排查过程，学习如何排查Java死锁问题，是一个非常值得学习的经验。

Apache Cassandra是一套开源分布式数据库管理系统，最初由Facebook开发，后续贡献给Apache。创始人后续创了Datastax公司用于商业Cassandra。 Cassandra在全球使用比较广发，为最流行的NoSQL宽表数据库。

深入MongoDB4.2新特性：字段级加密 Client-Side Field Level Encryption

主键索引格式如下： summery.db:index文件的索引，对partition做sampling索引，加快查找。 index.db:索引文件，data文件中每个partition都会有一个索引项，指向该partition在data文件中的偏移，还有对clustering的采样(sampling)索引，可直接指向具体clustering数据偏移。

MongoDB 4.2已经发布，我们来看看它增加了哪些新特性？分布式事务？数据库加密？通配符索引？

引言：十年沉淀、全球宽表排名第一、阿里云首发云Cassandra服务 ApsaraDB for Cassandra是基于开源Apache Cassandra，融合阿里云数据库DBaaS能力的分布式NoSQL数据库。

Cassandra监控运维介绍

数据仓库是否也需要上云？如果考虑上云，都需要注意哪些方面？目前主流云厂商产品又有何特点呢？本文将一一解答。

cassandra的集合类型toturist 创建带有复杂cell的user表 CREATE TABLE ks.user ( id int PRIMARY KEY, addr map, complex map

cassandra启动流程 整个启动流程会启动前端cql server用来接收客户端cql请求，启动node互相通信用的MessageService。这个都是常规操作，就不花费篇幅赘述了。cassandra启动过程对于新节点加入还是正常启动还是有区分的，新节点会造成数据重分布，所以需要先执行bootstrap。

简介 nodetool是cassandra自带的外围工具，通过JMX可以动态修改当前进程内存数据，注意cassandra是无主对等架构，默认的命令是操作本机当前进程，例如repair，如果需要做全集群修复，需要在每台机器上执行对应的nodetool命令。

cassandra概况 为什么选择Cassandra？cassandra到底有那些令人印象深刻的特点呢？不急，我们先来看下cassandra目前的大体概况。 理论扎实，师出名门 cassandra不仅吸收了dynamo论文中的如何做分布式，如何做副本复制，故障容错等方面成功的经验，又吸取了google bigtable中的LSM单机引擎层面精华。

背景 最近准备上线cassandra这个产品，同事在做一些小规格ECS(8G)的压测。压测时候比较容易触发OOM Killer，把cassandra进程干掉。问题是8G这个规格我配置的heap(Xmx)并不高（约6.5g）已经留出了足够的空间给系统。

介绍 我有一个具有以下功能的数据库服务器： 高可用设计。 可以全球分布。 允许应用程序随时随地写入任何节点。 只需向群集添加更多节点即可进行线性扩展。 自动负载及数据均衡。 一种看起来很像SQL的查询语言。

Redis 是一种内存数据库，将数据保存在内存中，读写效率要比传统的将数据保存在磁盘上的数据库要快很多。但是一旦进程退出，Redis 的数据就会丢失。 AOF( append only file )持久化以独立日志的方式记录每次写命令，并在 Redis 重启时在重新执行 AOF 文件中的命令以达到恢复数据的目的。

前言 只有光头才能变强。 文本已收录至我的GitHub仓库，欢迎Star：https://github.com/ZhongFuCheng3y/3y 最近在公司做了几张报表，还记得刚开始要做报表的时候都快把SQL给忘光了（当时在广州休假了1个月多，在实习期间也没咋写过SQL），回到公司的第一个需求就是做报表。

阿里云Prometheus方案给用户提供最省时省力的 Kubernetes容器平台的自动化运维监控，而且大幅提升了监控系统的可靠性、易用性、自动化和安全性。

阿里云中国站云HBase X-Pack中的Spark服务将于2019年7月16日进行价格下调。

近日刚刚发布免费公测的阿里云Prometheus（免费试用页面）提供了无缝对接Kubernetes集群的一站式、全托管监控解决方案，让用户可以方便灵活的一键配置对一个或多个阿里云Kubernetes集群的监控。

前言 只有光头才能变强。 文本已收录至我的GitHub仓库，欢迎Star：https://github.com/ZhongFuCheng3y/3y 记录一次在写代码时愚蠢的操作，本文涉及到的知识点：String不可变性 一、交代背景 我这边有一个系统，提供一个RPC接口去发送短信。

阿里云InfluxDB®除了提供稳定可靠的时序数据库服务，还提供了非常便捷的数据采集服务。用户能够方便查看各个采集源的运行状态并管理它们，采集的数据会自动存储到阿里云InfluxDB®。用户无需担心运维的问题，实现数据从采集到分析的一站式服务。

内容概要： 介绍GDB四种接入的方式，给出接入建议 介绍GDB使用中的一些问题和使用过程中的一些建议

通过阅读本文将Redis+Lua有了一定的了解，并能使用脚本完成一些简单的复合操作。

通过session_id建立自己的一套session机制，运用PHP+REDIS解决负载均衡后的session共享问题。

讲述MongoDB架构，以及该架构下引发MongoDB的多种丢数据的异常、脏读异常、陈旧读异常，MongoDB是如何致力于引入新版本的复制协议逐步消除了所有这些异常，最终让MongoDB达到一个high level的一致性和可靠性，成为一个可信任的数据库。

Prometheus 作为容器生态下集群监控的首选方案，是一套开源的系统监控报警框架。2019 年7月3日，阿里云Prometheus云托管实例正式开始免费公测。针对容器集群监控场景，提供了完整的采集、存储、监控、告警、图表展现的数据监控服务。

内容概要： 1. 介绍GDB四种接入的方式，给出接入建议 2. 介绍GDB使用中的一些问题和使用过程中的一些建议

讲述MongoDB架构，以及该架构下引发MongoDB的多种种丢数据的异常、脏读异常、陈旧读异常，MongoDB是如何致力于引入新版本的复制协议逐步消除了所有这些异常，最终让MongoDB达到一个high level的一致性和可靠性，成为一个可信任的数据库。

Redis 是一种内存数据库，将数据保存在内存中，读写效率要比传统的将数据保存在磁盘上的数据库要快很多。但是一旦进程退出，Redis 的数据就会丢失。 为了解决这个问题，Redis 提供了 RDB 和 AOF 两种持久化方案，将内存中的数据保存到磁盘中，避免数据丢失。

前言 只有光头才能变强。 文本已收录至我的GitHub仓库，欢迎Star：https://github.com/ZhongFuCheng3y/3y 回顾上一篇： 《大型网站系统与Java中间件》读书笔记（一） 这周周末读了第四章，现在过来做做笔记，希望能帮助到大家。

云HBase X-Pack是基于Apache HBase、Phoenix、Spark深度扩展，融合Solr检索等技术，支持海量数据的一站式存储、检索与分析。融合云kafka+云HBase X-Pack能够构建一体化的数据处理平台，支持风控、推荐、检索、画像、社交、物联网、时空、表单查询、离线数仓等场景，助力企业数据智能化。