big data 文章汇总
flink和spark的异同： https://www.zhihu.com/question/30151872
presto 还是hive？ http://geek.
开源日志系统比较
原文地址：http://www.cnblogs.com/ibook360/p/3159544.html
1. 背景介绍
许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：
（1） 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；
（2） 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；
（3） 具有高可扩展性。
跟我学Kafka源码使用入门（三）
这一节咱们主要是讨论单机版的Kafka的简单使用，关于集群方面的东西其实也非常简单，具体可以参考Kafka官网进行配置既可。
1、准备Zookeeper环境我们使用的是zookeeper-3.5.0版本。
空学Kafka之二
> 继续上一篇 (空学Kafka之一)[https://www.atatech.org/articles/145913]
## 构建数据通道
### 考量点
及时性，可靠性，吞吐量，安全性（通道安全，审计等），数据格式的上线兼容，ETL or ELT，统一还是专属（比如GoldenGate是oracle私有的，有很强的耦合性），优先选择Kafka Connect
###
Flink State 最佳实践
本文主要分享与交流 Flink 状态使用过程中的一些经验与心得，当然标题取了“最佳实践”之名，希望文章内容能给读者带去一些干货。本文内容首先是回顾 state 相关概念，并认识和区别不同的 state backend；之后将分别对 state 使用访问以及 checkpoint 容错相关内容进行详细讲解，分享一些经验和心得。
好程序员Java学习资源分享RabbitMQ介绍
好程序员Java学习资源分享RabbitMQ介绍，前言，RabbitMQ是基于AMQP协议（Advanced Message Queue Protocol）的消息中间件什么是消息队列消息队列属于进程间通信的一种方式，使用消息队列可以通过异步方式处理数据，借此可以提高系统性能。
