aliyun 日志服务(Log Service,Log)是针对日志场景的一站式服务

简介:

日志服务(Log Service,Log)是针对日志场景的一站式服务,在阿里巴巴集团内部被广泛使用。用户无需开发就能快捷完成日志生命周期中采集、消费、投递以及查询功能。

日志服务当前提供如下功能

  • 日志中枢(LogHub):通过Agent/API实时收集、订阅、消费日志数据

  • 日志投递(LogShipper):将日志定时归档至存储/计算类服务(ODPS/OSS)

  • 日志查询(LogSearch):提供基于时间、关键词查询用以定位及分析问题

 

其中日志中枢为基础功能,用户可根据需求选择日志投递及日志查询功能。日志服务提供健全API及Web控制台方便用户使用。

产品优势

  1. 使用便捷

    • 告别复杂配置,5分钟接入

    • 通过API/Web管理上万设备

    • 原生Agent支持,操作简单

  2. 丰富上下游,并不断拓展中

    • 上游:Linux、Windows,API、SDK

    • 下游: SDK/API、ODPS 、EMR(Sp ark、MR)、Storm

    • 即将推出:OSS、云监控等

  3. 稳定可靠

    • 三副本可靠性;48H任意时段消费

    • 高可用设计,可依赖服务

    • 支持多租户、支持RAM

基于日志服务的解决方案

日志服务与多个云产品、以及第三方开源生态进行对接,最大程度上降低用户使用门槛:例如流计算、数据仓库、监控等,除此之外在安全等领域引入ISV,可以通过安全云市场享受日志分析专家的服务。

一些典型场景

日志分析、大数据分析(Log Analysis)

典型场景与使用过程:

  1. 通过Agent、API实时收集系统产生事件,例如访问、点击等

  2. 通过LogHub接口进行流计算,例如分析用户最喜爱的节目,当前观看最高的频道,各个省市点播率等,精确运营

  3. 对日志进行数仓离线归档,每天、每周出详细的运营数据、账单等

适合领域:流媒体、电子商务、移动分析、游戏运营等,大名鼎鼎的CNZZ也是日志服务的用户)

日志审计 (SEIM, Auditing)

典型场景与使用过程:

  1. 通过Agent实时收集日志至日志服务,在此过程中无需担心误删、或被黑客删除

  2. 通过日志查询功能,快速分析访问行为,例如查询某个账户、某个对象、某个操作的操作记录

  3. 通过日志投递OSS、ODPS对日志进行长时间存储,满足合规审计需要

适合领域:电子商务、政府平台、网站等。 阿里云官网产品:ActionTrail,日志审计等就是基于日志服务开发

问题诊断(Trouble Shooting)

典型场景与使用过程:

  1. 开发过程中,对客户端、移动设备、服务端、模块等加入日志、并通过ID进行关联

  2. 收集各个模块日志,通过云监控、流计算等实时获得访问情况

  3. 当请求或订单发生错误时,开发无需登录服务器,直接通过日志查询功能对错误关键词、次数、关联影响等进行查询,快速定位问题,减少影响覆盖面

适合领域:交易系统、订单系统、移动网络等

其它:

计量计费、业务系统监控、漏洞检测、运营分析、移动客户端分析等。在阿里云内部,日志服务无处不在,几乎所有云产品都在使用日志服务解决日志处理、分析等问题。

 

转自:http://chuansong.me/n/2127255














本文转自张昺华-sky博客园博客,原文链接:http://www.cnblogs.com/bonelee/p/6640180.html,如需转载请自行联系原作者


相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
相关文章
|
监控 算法 测试技术
突破极限: 高负载场景下的单机300M多行正则日志采集不是梦
在当今数字化时代,日志数据已成为企业 IT 运营和业务分析的关键资源。然而,随着业务规模的扩大和系统复杂度的提升,日志数据的体量呈现爆发式增长,给日志采集和处理系统带来了巨大挑战。
805 101
|
10月前
|
缓存 Java 应用服务中间件
Spring Boot配置优化:Tomcat+数据库+缓存+日志,全场景教程
本文详解Spring Boot十大核心配置优化技巧,涵盖Tomcat连接池、数据库连接池、Jackson时区、日志管理、缓存策略、异步线程池等关键配置,结合代码示例与通俗解释,助你轻松掌握高并发场景下的性能调优方法,适用于实际项目落地。
1767 5
|
监控 容灾 算法
阿里云 SLS 多云日志接入最佳实践:链路、成本与高可用性优化
本文探讨了如何高效、经济且可靠地将海外应用与基础设施日志统一采集至阿里云日志服务(SLS),解决全球化业务扩展中的关键挑战。重点介绍了高性能日志采集Agent(iLogtail/LoongCollector)在海外场景的应用,推荐使用LoongCollector以获得更优的稳定性和网络容错能力。同时分析了多种网络接入方案,包括公网直连、全球加速优化、阿里云内网及专线/CEN/VPN接入等,并提供了成本优化策略和多目标发送配置指导,帮助企业构建稳定、低成本、高可用的全球日志系统。
1363 55
|
12月前
|
JSON 安全 网络安全
LoongCollector 安全日志接入实践:企业级防火墙场景的日志标准化采集
LoonCollector 是一款轻量级日志采集工具,支持多源安全日志的标准化接入,兼容 Syslog、JSON、CSV 等格式,适用于长亭 WAF、FortiGate、Palo Alto 等主流安全设备。通过灵活配置解析规则,LoonCollector 可将原始日志转换为结构化数据,写入阿里云 SLS 日志库,便于后续查询分析、威胁检测与合规审计,有效降低数据孤岛问题,提升企业安全运营效率。
|
存储 Windows
【Azure Cloud Service】微软云服务上的日志收集方法
本文介绍了在使用微软云服务(Cloud Service Extended Support)时,如何收集日志以分析未记录在应用日志中的服务异常。由于云服务基于传统虚拟机模式,需通过远程桌面登录实例,查看IIS、Windows Event及云服务组件日志(如WindowsAzureGuestAgent)。此外,可使用CollectGuestLogs.exe工具打包日志,或通过“File Server Resource Manager”检查日志存储配额是否不足。附参考文档链接供深入学习。
439 29
|
存储 监控 API
【Azure App Service】分享使用Python Code获取App Service的服务器日志记录管理配置信息
本文介绍了如何通过Python代码获取App Service中“Web服务器日志记录”的配置状态。借助`azure-mgmt-web` SDK,可通过初始化`WebSiteManagementClient`对象、调用`get_configuration`方法来查看`http_logging_enabled`的值,从而判断日志记录是否启用及存储方式(关闭、存储或文件系统)。示例代码详细展示了实现步骤,并附有执行结果与官方文档参考链接,帮助开发者快速定位和解决问题。
393 22
|
API 开发工具 Python
|
监控 Java 应用服务中间件
Tomcat log日志解析
理解和解析Tomcat日志文件对于诊断和解决Web应用中的问题至关重要。通过分析 `catalina.out`、`localhost.log`、`localhost_access_log.*.txt`、`manager.log`和 `host-manager.log`等日志文件,可以快速定位和解决问题,确保Tomcat服务器的稳定运行。掌握这些日志解析技巧,可以显著提高运维和开发效率。
1779 13
|
存储 JSON Go
PHP 日志系统的最佳搭档:一个 Go 写的远程日志收集服务
为了不再 SSH 上去翻日志,我写了个 Go 小脚本,用来接收远程日志。PHP 负责记录日志,Go 负责存储和展示,按天存储、支持 API 访问、可远程管理,终于能第一时间知道项目炸了。
385 10