_陆豪_个人页

Spotify如何使用Cassandra实现个性化推荐

本文翻译自https://labs.spotify.com/2015/01/09/personalization-at-spotify-using-cassandra/在Spotify我们有超过6000万的活跃用户，他们可以访问超过3000万首歌曲的庞大曲库。

Cassandra CDC初体验

CDC(Change data capture)是Cassandra提供的一种用于捕获和归档数据写入操作的机制，这个功能在3.8以上版本支持。当对一个表设置了“cdc=true”属性之后，包含有这个表的数据的CommitLog在丢弃时会被移动到指定的目录中，用户可以自己编写程序消费（解析并删除）这些日志，实现诸如增量数据导出、备份等功能。

高性能Cassandra多语言客户端

作为全球范围内最流行的宽表数据库，Apache Cassandra具备诸多优点：海量数据存储；简洁易上手的类SQL语法；总是在线；扩容灵活等。除了服务端的各种优点之外，Cassandra对各种语言客户端（driver）的高性能支持也是其实现易用性和良好性能的重要环节。

使用datax迁移cassandra数据

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现各种异构数据源之间高效的数据同步功能。最近，阿里云cassandra团队为datax提供了cassandra读写插件，进一步丰富了datax支持的数据源，可以很方便实现cassandra之间以及cassandra与其他数据源之间的数据同步。

简析Cassandra的BATCH操作

cassandra中批量写入的操作称为batch，通过batch操作可以将多个写入请求合并为一个请求。这样有如下作用： 把多次更新操作合并为一次请求，减少客户端和服务端的网络交互。 batch中同一个partition key的操作具有隔离性。

Cassandra压测工具cassandra-stress

cassandra-stress是cassandra自带的压测工具，可以针对具体的表schema设计，模拟各种负载情况，测试集群的读写性能。这个工具功能十分强大，但是网上能找到的（中文）资料并不多，尤其是对yaml配置文件的介绍很少。

Cassandra sstableloader工具使用及原理解析

sstableloader是cassandra提供的bulkload工具，可以将sstable文件导入到集群中。本文详细介绍其用法和实现原理。 用法 sstableloader工具在cassandra的bin目录下面，用法如下： bin/sstableloader

使用HGraphDB进行二度好友推荐

业务场景 某社交软件，需要基于用户的好友关系向用户做二度人脉的推荐。系统中保存的关系有两种，一种是A用户的通讯录中保存了B用户的电话号码，另一种是A用户在app上面关注了B用户。以下图所示的关系为例： 张三和王五，李四，赵六是好友，我们需要向张三推荐孙八、杨九和钱七。

关于HBase Region的一些基本概念

HBase2.0 Observer的一些改动

最近需要把一个1.x的Observer移植到HBase2.0，发现2.0里面Observer接口和1.x相比还是有不少不一样的地方。所以简单在jira里面看了一下，把遇到的几个改动点的来龙去脉看了一下。

阿里云HBase发布冷存储特性，助你不改代码，1/3成本轻松搞定冷数据处理

9月27日，阿里云HBase发布了冷存储特性。用户可以在购买云HBase实例时选择冷存储作为一个附加的存储空间，并通过建表语句指定将冷数据存放在冷存储介质上面，从而降低存储成本。冷存储的存储成本仅为高效云盘的1/3，适用于数据归档、访问频率较低的历史数据等各种场景。

连接HBase的正确姿势

在云HBase值班的时候，经常会遇见有用户咨询诸如“HBase是否支持连接池？”这样的问题，也有用户因为应用中创建的Connection对象过多，触发了zookeeper的连接数限制，导致客户端连不上的。

HBase2.0新特性之In-Memory Compaction

In-Memory Compaction是HBase2.0中的重要特性之一，通过在内存中引入LSM结构，减少多余数据，实现降低flush频率和减小写放大的效果。本文根据HBase2.0中相关代码以及社区的讨论、博客，介绍In-Memory Compaction的使用和实现原理。

基于阿里云HBase搭建OpenTSDB

OpenTSDB是一个基于HBase的分布式、可伸缩的开源时序数据库。OpenTSDB由TSD（Time Series Daemon）和一系列命令行工具组成。TSD用于接收用户请求并将时序数据存储在HBase中。

HBase经典网络集群迁移到vpc网络

云HBase目前暂时不支持将经典网络集群直接切换为vpc网络集群。如果用户需要将业务从经典网络切换到vpc网络，需要新创建一个vpc网络的HBase实例并把数据迁移过去。本文介绍的迁移方法，先使用ClassicLink打通经典网络和vpc网络，然后使用copytable同步集群的数据。

HBase数据导入工具总结

本文对HBase常用的数据导入工具进行介绍，并结合云HBase常见的导入场景，给出建议的迁移工具和参考资料。 HBase之间数据导入常用工具 HBase提供了几种数据迁移工具，其中基于API调用的有CopyTable,Export&Import。

使用CopyTable同步HBase数据

CopyTable是Hbase提供的一个数据同步工具，可以用于同步表的部分或全部数据。本文介绍如何使用CopyTable同步HBase数据。针对没有hadoop集群的用户，还介绍了单机运行CopyTable的配置和参数。

使用Sqoop从Mysql向云HBase同步数据

Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具。本文介绍如何使用sqoop将数据从Mysql导入到HBase。从成本的角度考虑，针对没有hadoop集群的用户，重点介绍单机运行sqoop的配置和参数。