日志数据如何同步到MaxCompute
日常工作中,企业需要将通过ECS、容器、移动端、开源软件、网站服务、JS等接入的实时日志数据进行应用开发。包括对日志实时查询与分析、采集与消费、数据清洗与流计算、数据仓库对接等场景。本次分享主要介绍日志数据如何同步到MaxCompute。
笔记整理:数据处理方式Data Processing
1.批处理Batch Processing
定义:将任务成批地提交给系统,由系统自动完成后再输出结果。
举个例子,住在UIC新小镇的人去旧小镇上课,学校没造诺亚方舟,没办法哗啦一下送过去,只能用几辆大巴,将我们一批批送过去。
The Log
The Log: What every software engineer should know about real-time data’s unifying abstraction
译文
Jay Kreps
Principal Staff Engineer
Posted on 12/16/2013
I joined LinkedIn about six yea
二维火监控平台的构建和探索
在阿里云栖开发者沙龙时序数据库技术专场上,二维火监控平台负责人董兵林为大家介绍了二维火监控平台构建的背景,构建过程和未来展望,向大家展示了如何快速实现一套自研的APM平台,并且如何在技术选型中进行一些取舍。
java,mysql,hadoop,cdh,hive,spark,ntp,zookeeper,kafka,storm,redis,flume,git 安装详解
顶部
----------------------------------------------------------------------------------------------------------------------------------
0.
JVM Profiler介绍
开篇
过去的几周把java多线程相关部分的源码粗粗的看了一遍基本上也算告一段落了,后面应该会聚焦看下dubbo、mycat、datax以及剩下部分的mybatis。