aliyun 日志服务(Log Service,Log)是针对日志场景的一站式服务

简介:

日志服务(Log Service,Log)是针对日志场景的一站式服务,在阿里巴巴集团内部被广泛使用。用户无需开发就能快捷完成日志生命周期中采集、消费、投递以及查询功能。

日志服务当前提供如下功能

  • 日志中枢(LogHub):通过Agent/API实时收集、订阅、消费日志数据

  • 日志投递(LogShipper):将日志定时归档至存储/计算类服务(ODPS/OSS)

  • 日志查询(LogSearch):提供基于时间、关键词查询用以定位及分析问题

 

其中日志中枢为基础功能,用户可根据需求选择日志投递及日志查询功能。日志服务提供健全API及Web控制台方便用户使用。

产品优势

  1. 使用便捷

  • 告别复杂配置,5分钟接入

  • 通过API/Web管理上万设备

  • 原生Agent支持,操作简单

丰富上下游,并不断拓展中

  • 上游:Linux、Windows,API、SDK

  • 下游: SDK/API、ODPS 、EMR(Sp ark、MR)、Storm

  • 即将推出:OSS、云监控等

稳定可靠

  • 三副本可靠性;48H任意时段消费

  • 高可用设计,可依赖服务

  • 支持多租户、支持RAM

基于日志服务的解决方案

日志服务与多个云产品、以及第三方开源生态进行对接,最大程度上降低用户使用门槛:例如流计算、数据仓库、监控等,除此之外在安全等领域引入ISV,可以通过安全云市场享受日志分析专家的服务。

一些典型场景

日志分析、大数据分析(Log Analysis)

典型场景与使用过程:

  1. 通过Agent、API实时收集系统产生事件,例如访问、点击等

  2. 通过LogHub接口进行流计算,例如分析用户最喜爱的节目,当前观看最高的频道,各个省市点播率等,精确运营

  3. 对日志进行数仓离线归档,每天、每周出详细的运营数据、账单等

适合领域:流媒体、电子商务、移动分析、游戏运营等,大名鼎鼎的CNZZ也是日志服务的用户)

日志审计 (SEIM, Auditing)

典型场景与使用过程:

  1. 通过Agent实时收集日志至日志服务,在此过程中无需担心误删、或被黑客删除

  2. 通过日志查询功能,快速分析访问行为,例如查询某个账户、某个对象、某个操作的操作记录

  3. 通过日志投递OSS、ODPS对日志进行长时间存储,满足合规审计需要

适合领域:电子商务、政府平台、网站等。 阿里云官网产品:ActionTrail,日志审计等就是基于日志服务开发

问题诊断(Trouble Shooting)

典型场景与使用过程:

  1. 开发过程中,对客户端、移动设备、服务端、模块等加入日志、并通过ID进行关联

  2. 收集各个模块日志,通过云监控、流计算等实时获得访问情况

  3. 当请求或订单发生错误时,开发无需登录服务器,直接通过日志查询功能对错误关键词、次数、关联影响等进行查询,快速定位问题,减少影响覆盖面

适合领域:交易系统、订单系统、移动网络等

其它:

计量计费、业务系统监控、漏洞检测、运营分析、移动客户端分析等。在阿里云内部,日志服务无处不在,几乎所有云产品都在使用日志服务解决日志处理、分析等问题。

 

转自:http://chuansong.me/n/2127255














本文转自张昺华-sky博客园博客,原文链接:http://www.cnblogs.com/bonelee/p/6640180.html,如需转载请自行联系原作者


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
21天前
|
Java
使用Java代码打印log日志
使用Java代码打印log日志
75 1
|
1天前
|
Java
log4j异常日志过滤规则配置
log4j异常日志过滤规则配置
7 0
|
13天前
|
运维 安全 Ubuntu
`/var/log/syslog` 和 `/var/log/messages` 日志详解
`/var/log/syslog` 和 `/var/log/messages` 是Linux系统的日志文件,分别在Debian和Red Hat系发行版中记录系统事件和错误。它们包含时间戳、日志级别、PID及消息内容,由`rsyslog`等守护进程管理。常用命令如`tail`和`grep`用于查看和搜索日志。日志级别从低到高包括`debug`到`emerg`,表示不同严重程度的信息。注意保护日志文件的安全,防止未授权访问,并定期使用`logrotate`进行文件轮转以管理磁盘空间。
19 1
|
14天前
|
网络协议 应用服务中间件 Linux
centos7 Nginx Log日志统计分析 常用命令
centos7 Nginx Log日志统计分析 常用命令
27 2
|
14天前
|
Ubuntu Linux 网络安全
/var/log/auth.log日志详解
`/var/log/auth.log`是Linux(尤其是Debian系如Ubuntu)记录身份验证和授权事件的日志文件,包括登录尝试(成功或失败)、SSH活动、sudo使用和PAM模块的操作。登录失败、SSH连接、sudo命令及其它认证活动都会在此记录。查看此日志通常需root权限,可使用`tail`、`less`或`grep`命令。文件内容可能因发行版和配置而异。例如,`sudo tail /var/log/auth.log`显示最后几行,`sudo grep "failed password" /var/log/auth.log`搜索失败密码尝试。
56 8
|
18天前
|
关系型数据库 MySQL Linux
linux特定服务日志
Linux系统的服务日志在`/var/log`目录下,如系统日志(`/var/log/syslog`或`/var/log/messages`)、认证日志(`/var/log/auth.log`)、SSH日志(`/var/log/auth.log`或`/var/log/secure`)。Web服务器(Apache和Nginx)的访问和错误日志、MySQL错误日志、Postfix及Dovecot邮件服务器日志也在此处。日志位置可能因发行版和服务配置而异,不确定时可查服务配置或用`grep`搜索。使用`logrotate`可管理日志文件大小。
20 6
|
22天前
|
Linux Shell
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
77 1
|
26天前
|
SQL 关系型数据库 MySQL
MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复
对于MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复。二进制日志是MySQL中记录所有数据库更改操作的日志文件。要进行时间点恢复,您需要执行以下步骤: 1. 确保MySQL配置文件中启用了二进制日志功能。在配置文件(通常是my.cnf或my.ini)中找到以下行,并确保没有被注释掉: Copy code log_bin = /path/to/binary/log/file 2. 在需要进行恢复的时间点之前创建一个数据库备份。这将作为恢复的基准。 3. 找到您要恢复到的时间点的二进制日志文件和位置。可以通过执行以下命令来查看当前的二进制日志文件和位
|
1月前
|
监控 Shell Linux
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
49 0
|
1月前
|
存储 数据库
ALTER MATERIALIZED VIEW LOG :语句来更改现有物化视图日志的存储特征或类型。
`ALTER MATERIALIZED VIEW LOG` 语句用于修改已有的物化视图日志的存储属性或类型。配合示例中的动画图像(由于格式限制无法显示),该语句帮助优化数据库的性能和管理。
44 0

热门文章

最新文章