什么是S3?
Amazon Simple Storage Service(Amazon S3)是一种对象存储服务,提供行业领先的可扩展性、数据可用性、安全性和性能。各种规模和行业的客户都可以使用 Amazon S3 存储和保护任意数量的数据,用于数据湖、网站、移动应用程序、备份和恢复、归档、企业应用程序、IoT 设备和大数据分析。Amazon S3 提供了管理功能,使您可以优化、组织和配置对数据的访问,以满足您的特定业务、组织和合规性要求。
什么是S3 Lens?
随着业务增长,桶的规模逐步扩大,维护代价及费用成本的增长都将面临挑战。
Amazon S3 Storage Lens(S3 Lens) 提供了整个 Amazon S3 存储中的使用情况和行为的统一视图。包括支持向下钻取能力,用于在组织、账户、存储桶、对象甚至前缀级别生成分析视图。支持可视化分析存储指标以提供上下文建议,帮助用户优化存储成本并提供数据保护的最佳实践建议。
欢迎页面
S3 Lens的欢迎页面以比较突出的方式图文介绍基本功能,引导用户快速配置控制面板。
默认控制面板
S3 Lens为用户提供一个默认控制面板default-account-dashboard,汇总整个账号的存储使用情况及各指标趋势。该面板无法删除及修改配置的范围,默认提供免费指标的监控,数据有24小时延迟,免费查询14天的数据,可升级到付费的高级指标,查看更丰富、更长时间的数据。
自定义控制面板
创建步骤
1.
S3 Lens支持在每个主区域下创建最多50个控制面板,每个控制面板对应的指标都集中存储在指定的主区域下,创建完成后不允许修改主区域。
2.
用户可以选择需要配置的区域和存储桶。当未开启AWS Organizations时,默认为当前账号。当开启AWS Organizations后,用户可以选择配置多账号监控。
3.
S3 Lens提供免费指标、高级指标和建议两种选项,其中免费指标包含与存储使用情况相关的指标,按天粒度统计,可免费查询14天的数据。
4.
高级指标和建议,为付费功能,除包含所有免费指标外,还包含活动指标、CloudWatch发布、前缀聚合等高级功能。通过活动指标可以统计Bucket相关的请求数、扫描数、流量、错误数等信息。高级功能支持查询15个月的数据,并将会根据用户的使用情况提供优化建议。
查看控制面板
S3 Lens不支持根账号访问控制面板,只允许IAM用户访问,且首次创建控制面板需要48小时才能看到数据。
筛选条件
支持固定4个维度的筛选:账户、区域、存储类型、存储桶,默认全选,用户可通过下拉列表进行多选。
资源概览
概览模块按照用户配置的指标类型提供免费指标和高级指标前一天的快照,摘要、成本效率、数据保护、活动分别对应不同类型的指标,提供天、周、月环比统计及30天趋势。帮助用户以直观的可视化交互方式分析使用成本及数据安全,并提供优化建议,引导用户进行优化。
趋势与分布
该仪表盘提供两个指标维度的趋势统计,用户可以对所有指标进行任意组合分析,聚合方式固定按天粒度,日期范围不支持自定义,提供的范围基本覆盖所有高频查询需求。
按照存储类型、区域分布统计
Top N支持对每个指标按照账号、区域、存储桶、前缀4个维度进行统计,同样提供天、周、月环比。
维度统计
用户还可直接通过Tab页的方式对所有指标按照账户、区域、存储类型、存储桶、前缀维度进行分类统计。
指定维度趋势
指定维度柱状图统计
指定维度气泡分析
通过气泡可以非常直观的对指定维度的三维指标进行对比分析。
指定维度分类统计
此处通过将指标按用户最关注的分类进行统计展示,其中用户可以自定义展示的列。
向下钻取
所有的统计图表,均可以对每个指标进行向下钻取的能力,提供对各指标更细粒度的分析。
CloudWatch
用户如需要通过CloudWatch对S3 Lens的指标配置异常检测等告警策略,必须开启高级指标及建议,为收费功能。其中前缀指标不支持投递到CloudWatch。
指标导出
当启用指标导出功能时,将会按照固定时间每天导出一次所有指标统计数据,用户可选择导出到当前账号或跨账号导出,但只支持同地域。用户可自行下载指标统计数据进行离线分析。导出格式支持csv及Apache Parquet两种。
为了保护存储在S3上数据的安全,可开启服务端加密,对用户使用完全透明。
收费策略
S3 Lens针对高级指标和建议收费,按照每个控制面板监控的对象数单独计费。
参考链接:
https://docs.aws.amazon.com/zh_cn/AmazonS3/latest/userguide/storage_lens.html
https://aws.amazon.com/cn/s3/storage-analytics-insights/
https://docs.aws.amazon.com/zh_cn/AmazonS3/latest/userguide/storage_lens_with_organizations.html