日志服务主要功能

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 本文介绍日志服务主要的功能。

数据采集
日志服务提供50多种数据接入方案。具体说明如下:

支持采集服务器与应用相关的日志、时序数据和链路数据。

支持采集物联网设备日志。

支持采集阿里云产品日志。

支持采集移动端数据。

支持采集Logstash、Flume、Beats、FluentD、Telegraf等开源软件中的数据。

支持通过HTTP、HTTPS、Syslog、Kafka、Prometheus等标准协议接入数据。

查询与分析
日志服务支持实时查询与分析数据。具体说明如下:

支持精确查询、模糊查询、全文查询、字段查询。

支持上下文查询、日志聚类、LiveTail、重建索引等功能。

支持标准的SQL 92语法。

提供SQL独享实例。

数据加工
日志服务提供数据加工功能,用于数据的规整、富化、流转、脱敏和过滤。具体说明如下:

数据规整:针对混乱格式的日志进行字段提取、格式转换,获取结构化数据以支持后续的流处理、数据仓库计算。

数据富化:对日志(例如订单日志)和维表(例如用户信息表)进行字段连接(JOIN),为日志添加更多维度的信息,用于数据分析。

数据流转:通过全球加速功能将海外地域的日志传输到中心地域,实现全球日志集中化管理。

数据脱敏:对数据中包含的密码、手机号、地址等敏感信息进行脱敏。

数据过滤:过滤出关键服务的日志,用于重点分析。

消费与投递
日志服务提供消费与投递功能,支持通过SDK、API实时消费数据;支持通过控制台将数据实时投递至OSS、MaxCompute等阿里云产品中。具体说明如下:

支持通过Splunk、QRadar、Logstash、Flume等第三方软件消费数据。

支持通过Java、Python、GO等语言消费数据。

支持通过函数计算、实时计算、云监控等阿里云产品消费数据。

支持通过Flink、Spark、Storm等流式计算平台消费数据。

支持将数据投递到OSS、MaxCompute、AnalyticDB、TableStore等阿里云产品。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
7月前
|
存储 Go
Go 浅析主流日志库:从设计层学习如何集成日志轮转与切割功能
本文将探讨几个热门的 go 日志库如 logrus、zap 和官网的 slog,我将分析这些库的的关键设计元素,探讨它们是如何支持日志轮转与切割功能的配置。
294 0
Go 浅析主流日志库:从设计层学习如何集成日志轮转与切割功能
C++-实现日志log功能
C++-实现日志log功能
146 0
|
2月前
|
Rust 前端开发 JavaScript
Tauri 开发实践 — Tauri 日志记录功能开发
本文介绍了如何为 Tauri 应用配置日志记录。Tauri 是一个利用 Web 技术构建桌面应用的框架。文章详细说明了如何在 Rust 和 JavaScript 代码中设置和集成日志记录,并控制日志输出。通过添加 `log` crate 和 Tauri 日志插件,可以轻松实现多平台日志记录,包括控制台输出、Webview 控制台和日志文件。文章还展示了如何调整日志级别以优化输出内容。配置完成后,日志记录功能将显著提升开发体验和程序稳定性。
116 1
Tauri 开发实践 — Tauri 日志记录功能开发
|
7月前
|
数据采集 分布式计算 监控
日志服务功能特性
日志服务功能特性
69 7
|
3月前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
179 9
|
4月前
|
存储 监控 Serverless
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
|
4月前
|
监控 Serverless 开发者
函数计算发布功能问题之查看函数的调用日志的问题如何解决
函数计算发布功能问题之查看函数的调用日志的问题如何解决
|
5月前
|
Python
Python编程实战:利用闭包与装饰器优化日志记录功能
【7月更文挑战第7天】Python的闭包和装饰器简化了日志记录。通过定义如`log_decorator`的装饰器,可以在不修改原函数代码的情况下添加日志功能。当@log_decorator用于`add(x, y)`函数时,调用时自动记录日志。进一步,`timestamp_log_decorator`展示了如何创建特定功能的装饰器,如添加时间戳。这些技术减少了代码冗余,提高了代码的可维护性。
72 1
|
5月前
|
监控
若依修改-----其他功能,包括参数设置,通知公告,日志管理,验证码控制开关在参数设置里,若依的注册页面是隐藏的,在src的login.vue的97行注册开发,修改成true,通知公告,促进组织内部信
若依修改-----其他功能,包括参数设置,通知公告,日志管理,验证码控制开关在参数设置里,若依的注册页面是隐藏的,在src的login.vue的97行注册开发,修改成true,通知公告,促进组织内部信
|
6月前
|
缓存 监控 安全
在 Spring Boot 中使用 AOP(Aspect-Oriented Programming)实现日志记录功能
在 Spring Boot 中使用 AOP(Aspect-Oriented Programming)实现日志记录功能
352 1
下一篇
DataWorks