云存储网关集成SLS的网关日志上线

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 概述 云存储网关6月底商业化之后,在稳定性和性能不断提高的同时,安全和监控方面能力也进一步得到了增强。网关在1.0.39版本集成SLS日志服务输出了网关日志监控,主要解决以下的痛点: 网关提供了近期几天的性能监控图,但是没有查询历史性能数据的接口 前端写入了数据,用户如何能够知晓这些数据何时上云以及上云的响应时间 用户如何审计网关的上云增删改的所有操作 配置 云存储网关日志监控配置操作简单便捷,支持监控项的创建,删除,启用,禁用。

概述

云存储网关6月底商业化之后,在稳定性和性能不断提高的同时,安全和监控方面能力也进一步得到了增强。网关在1.0.39版本集成SLS日志服务输出了网关日志监控,主要解决以下的痛点:

  • 网关提供了近期几天的性能监控图,但是没有查询历史性能数据的接口
  • 前端写入了数据,用户如何能够知晓这些数据何时上云以及上云的响应时间
  • 用户如何审计网关的上云增删改的所有操作

配置

云存储网关日志监控配置操作简单便捷,支持监控项的创建,删除,启用,禁用。在云控制台详情页可以看到日志监控项如下:

sls_create

以创建监控项为例,用户只需要配置SLS日志服务的Project和Logstore,如果用户当前没有可用的Project和Logstore, 需要自行到日志服务控制台提前创建出来。云存储网关会将日志项推送到用户指定的Logstore中。

sls_project

性能监控日志

性能监控日志包括网关系统网络,磁盘,CPU,内存,总OSS上传下载量,总缓存使用空间等统计信息以及共享文件夹的前端读写带宽,OSS上传下载量,OSS使用空间,OSS健康检查,缓存盘吞吐使用率信息等统计信息,便于用户查看系统和共享文件夹的历史统计信息。在type的标签字段里会显示[statistics]信息。

stats

审计日志

审计日志会包含上传,重命名,删除等上云相关的操作,便于用户审计上云操作状态和以及查询操作的起止时间。在type的标签字段里会显示[auditlog]信息。

audit

使用网关日志

日志服务提供了强大的检索功能,用户可以为Logstore的网关日志建立索引,查询任意时间段内的标签信息以及文本关键字。除此之外,用户还可以利用日志分析能力对网关日志进行处理,并且把分析结果通过仪表大盘展示出来。如图例,我们可以提取某个网关id的日志项,统计一个小时内出现的监控日志和审计日志的数量,以及统计上云各项操作的数量

chart

更多的分析方法可以详见日志服务官方帮助文档中查询与分析的相关章节。

目录
相关文章
|
1月前
|
SQL 存储 JSON
更快更强,SLS 推出高性能 SPL 日志查询模式
从海量的日志数据中,按照各种灵活的条件进行即时查询搜索,是可观测场景下的基本需求。本文介绍了 SLS 新推出的高性能 SPL 日志查询模式,支持 Unix 风格级联管道式语法,以及各种丰富的 SQL 处理函数。同时通过计算下推、向量化计算等优化,使得 SPL 查询可以在数秒内处理亿级数据,并支持 SPL 过滤结果分布图、随机翻页等特性。
11370 93
|
2月前
|
SQL 运维 监控
SLS 数据加工全面升级,集成 SPL 语法
在系统开发、运维过程中,日志是最重要的信息之一,其最大的优点是简单直接。SLS 数据加工功能旨在解决非结构化的日志数据处理,当前全面升级,集成 SPL 语言、更强的数据处理性能、更优的使用成本。
18088 137
|
14天前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
49 9
|
28天前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之数据集成任务日志中显示wait,是什么原因
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
2月前
|
监控 数据管理 关系型数据库
数据管理DMS使用问题之是否支持将操作日志导出至阿里云日志服务(SLS)
阿里云数据管理DMS提供了全面的数据管理、数据库运维、数据安全、数据迁移与同步等功能,助力企业高效、安全地进行数据库管理和运维工作。以下是DMS产品使用合集的详细介绍。
|
1月前
|
存储 Kubernetes Java
阿里泛日志设计与实践问题之在写多查少的降本场景下,通过SLS Scan方案降低成本,如何实现
阿里泛日志设计与实践问题之在写多查少的降本场景下,通过SLS Scan方案降低成本,如何实现
|
1月前
|
弹性计算 监控 索引
阿里泛日志设计与实践问题之SLS Scan服务的稳定性和可用性如何保证
阿里泛日志设计与实践问题之SLS Scan服务的稳定性和可用性如何保证
|
1月前
|
存储 SQL JSON
阿里泛日志设计与实践问题之SLS Scan的语法该如何定义
阿里泛日志设计与实践问题之SLS Scan的语法该如何定义
|
22天前
|
Kubernetes Ubuntu Windows
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
|
4天前
|
Java
日志框架log4j打印异常堆栈信息携带traceId,方便接口异常排查
日常项目运行日志,异常栈打印是不带traceId,导致排查问题查找异常栈很麻烦。