日志数据的关键字统计与报警实践指南
统计业务日志中关键字的数量,并在统计数量达到一定条件时报警是业务日志的常见需求之一。本教程的目的是通过一个具体案例介绍如何对存储在日志服务产品中的数据进行关键字统计和报警。参照本教程的介绍,您可以快速走通日志的关键字统计、查询图表可视化和设置报警流程。
Flume 使用学习小结
#概述
在做埋点数据离线存储到odps中,用到了Flume。一边使用,一边学习了下Flume。其中感受到Flume确实易伸缩、易扩展。其中的组件都可以根据自己的业务特点方便的自定义使用。
Flume可进行大量日志数据采集、聚合和并转移到存储中,并提供数据在流转中的事务机制;
可适用场景:日志--->Flume--->实时计算(如MQ+Storm) 、日志--->Flume--->
云数据库的数据和日志备份下载
为了保障用户权益,阿里云的云数据库RDS 提供未加密的数据备份和日志备份下载。RDS 为主备双实例架构,每个实例都有唯一编号。RDS 会在备实例上执行数据备份,同时在主备实例上执行日志备份。
消息中间件系列一、消息中间件的基本了解
一、消息中间件的定义:
没有标准定义,一般认为,采用消息传送机制/消息队列 的中间件技术,进行数据交流,用在分布式系统的集成
二、为什么要用消息中间件?
解决分布式系统之间消息的传递。电商场景: 用户下单减库存,调用物流系统,系统扩充后服务化和业务拆分。