日志服务功能特性

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 日志服务功能特性

数据采集
日志服务提供50多种数据接入方案。具体说明如下:

支持采集服务器与应用相关的日志、时序数据和链路数据。

支持采集物联网设备日志。

支持采集阿里云产品日志。

支持采集移动端数据。

支持采集Logstash、Flume、Beats、FluentD、Telegraf等开源软件中的数据。

支持通过HTTP、HTTPS、Syslog、Kafka、Prometheus等标准协议接入数据。

数据清洗
更多信息,请参见数据采集概述。

查询与分析
日志服务支持实时查询与分析数据。具体说明如下:

支持精确查询、模糊查询、全文查询、字段查询。

支持上下文查询、日志聚类、LiveTail、重建索引等功能。

支持标准的SQL 92语法。

提供SQL独享实例。

DevOps/线上运维
更多信息,请参见查询概述和分析概述。

数据加工
日志服务提供数据加工功能,用于数据的规整、富化、流转、脱敏和过滤。具体说明如下:

数据规整:针对混乱格式的日志进行字段提取、格式转换,获取结构化数据以支持后续的流处理、数据仓库计算。

数据富化:对日志(例如订单日志)和维表(例如用户信息表)进行字段连接(JOIN),为日志添加更多维度的信息,用于数据分析。

数据流转:通过全球加速功能将海外地域的日志传输到中心地域,实现全球日志集中化管理。

数据脱敏:对数据中包含的密码、手机号、地址等敏感信息进行脱敏。

数据过滤:过滤出关键服务的日志,用于重点分析。

数据加工
更多信息,请参见数据加工概述。

消费与投递
日志服务提供消费与投递功能,支持通过SDK、API实时消费数据;支持通过控制台将数据实时投递至OSS、MaxCompute等阿里云产品中。具体说明如下:

支持通过Splunk、QRadar、Logstash、Flume等第三方软件消费数据。

支持通过Java、Python、GO等语言消费数据。

支持通过函数计算、实时计算、云监控等阿里云产品消费数据。

支持通过Flink、Spark、Storm等流式计算平台消费数据。

支持将数据投递到OSS、MaxCompute、AnalyticDB、TableStore等阿里云产品。

投递数仓
更多信息,请参见实时消费概述和数据投递概述。

可视化
日志服务支持可视化展示查询和分析结果。具体说明如下:

仪表盘内置图表:日志服务为您提供表格、线图、柱状图等多种统计图表,您可以根据分析需求选用合适的图表类型展示查询和分析结果,并将结果保存到仪表盘中。

第三方可视化工具:日志服务支持直接对接Grafana、DataV等第三方图表。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
4月前
|
存储 Go
Go 浅析主流日志库:从设计层学习如何集成日志轮转与切割功能
本文将探讨几个热门的 go 日志库如 logrus、zap 和官网的 slog,我将分析这些库的的关键设计元素,探讨它们是如何支持日志轮转与切割功能的配置。
260 0
Go 浅析主流日志库:从设计层学习如何集成日志轮转与切割功能
|
11月前
|
C++
C++-实现日志log功能
C++-实现日志log功能
117 0
|
25天前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
57 9
|
1月前
|
存储 监控 Serverless
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
函数计算发布功能问题之用户在使用主流函数计算产品的日志服务时可能会遇到使用成本的问题如何解决
|
1月前
|
监控 Serverless 开发者
函数计算发布功能问题之查看函数的调用日志的问题如何解决
函数计算发布功能问题之查看函数的调用日志的问题如何解决
|
2月前
|
Python
Python编程实战:利用闭包与装饰器优化日志记录功能
【7月更文挑战第7天】Python的闭包和装饰器简化了日志记录。通过定义如`log_decorator`的装饰器,可以在不修改原函数代码的情况下添加日志功能。当@log_decorator用于`add(x, y)`函数时,调用时自动记录日志。进一步,`timestamp_log_decorator`展示了如何创建特定功能的装饰器,如添加时间戳。这些技术减少了代码冗余,提高了代码的可维护性。
51 1
|
2月前
|
监控
若依修改-----其他功能,包括参数设置,通知公告,日志管理,验证码控制开关在参数设置里,若依的注册页面是隐藏的,在src的login.vue的97行注册开发,修改成true,通知公告,促进组织内部信
若依修改-----其他功能,包括参数设置,通知公告,日志管理,验证码控制开关在参数设置里,若依的注册页面是隐藏的,在src的login.vue的97行注册开发,修改成true,通知公告,促进组织内部信
|
3月前
|
缓存 监控 安全
在 Spring Boot 中使用 AOP(Aspect-Oriented Programming)实现日志记录功能
在 Spring Boot 中使用 AOP(Aspect-Oriented Programming)实现日志记录功能
121 1
|
3月前
|
存储 缓存 安全
【实战指南】轻松自研嵌入式日志框架,6大功能亮点一文读懂
本文介绍了如何自研一个嵌入式日志框架,涵盖了6大功能亮点:日志分级管理、异步处理与并发安全性、详尽上下文信息记录、滚动日志归档策略、高效资源利用和便捷API接口。设计上,通过日志过滤器、共享环形缓冲区和独立的日志管理进程实现日志管理。在并发环境下,使用信号量保证线程安全。日志文件按大小滚动并有序归档,同时考虑了资源效率。对外提供简洁的API接口,便于开发人员使用。文章还简述了实现细节,包括实时存储、日志滚动和共享内存管理。测试部分验证了日志回滚和实时打印功能的正确性。
148 4
|
4月前
|
缓存 应用服务中间件 网络安全
nginx 日志,压缩,https功能介绍
nginx 日志,压缩,https功能介绍