背景
什么是OSS?
阿里云对象存储OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云存储服务,并可无限扩展,支持存储任意类型数据,尤其适合存储论坛网站与软件应用中的附件、高清图片、音视频、备份文件等,以及各种App应用、多终端同步软件、网盘下载站的文件,可提供99.9999999999%(12个9)的数据持久性,99.995%的数据可用性。
OSS具有与平台无关的RESTful API接口,可以在任何应用、任何时间、任何地点存储和访问任意类型的数据。由于OSS具有高度可扩展性,且只需为实际用量付费,因此不管是个人用户还是企业用户,都可以根据业务需要进行扩展,而不影响性能和持久性。
随着用户业务规模及存储量的增长,如何帮助用户更合理的使用OSS,降低安全风险,优化使用成本将是一个非常重要的能力。
实时日志查询现状
当前用户可在OSS控制台开通对应Bucket的实时日志查询功能,帮助完成OSS访问的操作审计、访问统计、异常事件回溯和问题定位等工作,提升工作效率并更好地帮助用户基于数据进行决策。
实时日志包含如下日志:
- 访问日志:记录相关OSS Bucket的所有访问日志,实时采集。
- 批量删除日志:记录批量删除日志时具体的删除信息,实时采集。
- 每小时计量日志:记录特定OSS Bucket每个小时累计的一些统计计量,延迟时间为几小时,用于辅助分析。
同时提供4个维度的内置报表:
- 访问中心:展示总体运营状况信息,包括PV、UV、流量以及外网访问地图分布等。
- 审计中心:展示文件操作的统计信息,包括文件读、写、删等操作统计。
- 运维中心:展示针对访问日志的统计信息,包括请求数量、失败操作的分布统计等信息。
- 性能中心:展示针对性能的统计信息,包括外网下载和上传性能分布、不同网络与文件大小的传输性能、文件下载差异列表等信息。
用量查询现状
当前可以通过OSS控制台在Bucket详情页面查询部分用量统计,整体会有24小时的延迟。
- 基础数据:包括存储空间、使用带宽、使用流量和请求次数。
- 热点统计:包括PV、UV、Refer (Top 10)或IP (Top 10)。
- 区域和运营商统计:包括访问区域分布和运营商。
- API统计:包括Method统计和返回码。
- 文件访问统计:包括文件访问相关的统计数据。
说明 目前仅中国内地、中国香港以及美国东部(弗吉尼亚)、美国西部(硅谷)、新加坡地域支持热点统计、区域和运营商统计、API统计、文件访问统计。
CloudLens介绍
CloudLens基于日志服务构建统一的云产品可观测能力,通过日志、指标、配置计量等数据的关联分析,提供阿里云产品的用量分析、性能监控、安全分析、数据保护、异常检测、访问分析等服务。从成本、性能、安全、数据保护、稳定性、访问分析六个维度,助力您快速构建云产品的可观测性,更好地使用云产品。
功能简介
日志服务联合阿里云OSS推出CloudLens for OSS,支持Bucket粒度的统一管理视图,支持资源用量、访问分析、异常检测、安全分析等可视化分析能力,提供场景化运维管理,实现Bucket资产的可观测性。主要功能如下:
- 支持集中管理所有Bucket访问明细日志的采集状态
- 支持集中管理所有的日志存储库
- 支持按照Bucket维度统一配置关键的异常检测告警
- 支持内置Bucket核心指标的可视化报表
CloudLens默认免费开通中心化计量日志及时序监控数据,自开通之日起,可免费查询60天的数据,当前包含3类日志,分别如下:
- 访问明细日志:记录相关OSS Bucket的所有访问日志及批量删除日志时具体的删除信息,实时采集,同时也包含计量日志。
- 计量日志:记录特定OSS Bucket每小时累计的计量数据。延迟时间为几个小时,用于辅助分析,默认免费开通。
- 时序监控数据:记录10秒粒度的请求、延迟、流量等指标及5分钟粒度的请求、流量等指标。默认免费开通。
接入管理
接入管理
- 支持集中管理当前阿里云账号下所有符合条件的OSS Bucket访问明细日志采集状态。
- 支持集中管理存储日志库(Project、Logstore、Metricstore)。
- 支持查看存储日志库的地域、数据保存时间。
- 支持数据保存时间的调整。
- 支持查看当前日志库有哪些Bucket开启了采集。
查询分析
支持实时查询与分析OSS访问明细日志和计量日志。
异常检测
- 提供告警态势感知大盘,您可以更直观地分析告警的分布及趋势等。
- 提供告警中心管理,支持Bucket维度的告警配置。
告警规则如下:
报表中心
报表 |
功能 |
资源用量 |
提供OSS存储、流量等基本维度的用量概览,便于您全局了解OSS使用情况。 |
访问分析 |
从使用视角分析各个OSS Bucket的流量分布、访问TOP分布等信息。 |
安全分析 |
暴露OSS Bucket配置的风险点和高危Object操作。 |
更多SLS的系列直播与培训视频会同步到微信公众号、知乎与B站,敬请留意