NAS用户级日志实时分析功能:高效、便捷、快速分析NAS访问日志-阿里云开发者社区

开发者社区> 云雷> 正文

NAS用户级日志实时分析功能:高效、便捷、快速分析NAS访问日志

简介: 支持对NAS下大量访问日志进行查询分析、并提供开箱即用的报表及灵活开放的报表与报警功能。帮助NAS用户管理自己的数据看板,实时了解访问明细,审计敏感操作,诊断问题,实时报警等。
+关注继续查看

NAS访问日志价值

文件存储 NAS( Network Attached Storage )是一种分布式的网络文件存储,为ECS、HPC、Docker、BatchCompute 等提供安全、无限容量、高性能、高可靠、简单易用的文件存储服务。到达NAS的每一条请求都会产生一天访问日志。该日志包含了用户的操作类型,目标对象,响应状态等。

现在,日志服务支持对NAS下大量访问日志进行查询分析、并提供开箱即用的报表及灵活开放的报表与报警功能。帮助NAS用户管理自己的数据看板,实时了解访问明细,审计敏感操作,诊断问题,实时报警等。

功能优势

  • 配置简单:轻松配置即可实时采集NAS访问日志。
  • 灵活分析:依托日志服务,提供实时日志分析,并提供开箱即用的报表中心。
  • 实时告警:支持基于特定指标定制准实时的监测与告警,确保关键业务异常时可及时响应。
  • 生态体系:支持对接其他生态如流计算、云存储、可视化方案,进一步挖掘数据价值。

用户体验预览

  • 无缝嵌入NAS控制台,简单配置,即可获得实时日志分析、与开箱即用的报表功能:

常用使用场景

场景1. 总览NAS各个Volume的读写操作情况

在总览视图中,可以看到活跃的Volume个数,总的读写流量,以及每个Volume的创建、删除、读、写操作的次数、分布情况。
image.png

场景2. NAS访问明细

在访问明细中,可以看到一些操作在时间上的分布,以及各种成功失败的操作以及失败的原因:

  1. 数据读写流动趋势,从哪些ip写到哪些volume,再由哪些ip读取。
  2. 各个Volume访问的文件个数和比例。
  3. 各个Volume访问QPS。
  4. 各个Volume每分钟读写总流量、平均流量。
  5. Top读写客户端IP。
  6. 操作错误Top IP,用于诊断操作错误来源。
  7. 热点的读、写、创建、删除操作次数。
  8. 热点访问文件的inode。
  9. 各种异常操作(权限失败,操作失败)等次数。
  10. 各种操作状态的分布(通过AuthRc,NFSProtocolRc判断)。

image.png

场景3. 敏感操作审计

审计视图,可以帮助我们查看用户对NAS的一些敏感操作,比如创建、删除目录或文件,以及读写最多的文件。

image.png

场景4. 搜索访问日志

  • 搜索鉴权失败的日志,用于识别一些权限异常的操作。

image.png

  • 搜索操作失败的日志,查看哪些操作结果不正确。

image.png

如何使用

  1. 在NAS控制台申请公测:

image.png

  1. 新建日志管理:

image.png

  1. 分别选择总览视图,明细视图,审计视图,即可观察指标。

字段说明

字段名 字段样例值 含义
ArgIno 226 文件系统inode号
AuthRc 0 授权返回码
NFSProtocolRc 0 NFS协议返回码
OpList null NFSv4 Procedures编号
Proc 1 NFSv3 Procedures编号
RWSize -1 读写大小,单位字节
RequestId 5ACF5CD506EAC7A508F056DF 请求ID
ResIno null lookup的资源inode号
SourceIp 127.0.0.1 客户端IP
User 123456789 用户ID
Vers 3 NFS协议版本号
Vip 172.18.158.178 服务端IP
Volume 2d2794a330 文件系统ID
microtime 1523539157201995 请求发生时间,单位微秒

限制与说明

  • 专属日志库不支持写入其他数据。
    专属日志库用于存入NAS访问日志,因此不支持写入其他数据。其他查询、统计、报警、流式消费等功能没有限制。
  • 计费说明:目前数据和功能免费提供给用户使用,数据免费存储7天,若用户自行调整存储周期,超出7天的部分正常收费。


版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
日志系列--前端访问日志的统计分析
简介 很多个人站长在搭建网站时使用nginx作为服务器,为了了解网站的访问情况,一般有两种手段: 使用CNZZ之类的方式,在前端页面插入js,用户访问的时候触发js,记录访问请求。 分析nginx的access log,从日志中挖掘有用信息。
4165 0
《UNIX环境高级编程(第3版)》——2.7 功能测试宏
如前所述,头文件定义了很多POSIX.1和XSI符号。但是除了POSIX.1和XSI定义外,大多数实现在这些头文件中也加入了它们自己的定义。如果在编译一个程序时,希望它只与POSIX的定义相关,而不与任何实现定义的常量冲突,那么就需要定义常量_POSIX_C_SOURCE。
1422 0
Fun 2.16.0 发布——资源部署、NAS 支持、镜像拉取等功能又又又增强啦!
Fun 2.16.0 发布——资源部署、NAS 支持、镜像拉取等功能又又又增强啦! Fun 是什么 Fun: Fun 是一个用于支持 Serverless 应用部署的工具,能帮助您便捷地管理函数计算、API 网关、日志服务等资源。
1190 0
新功能:日志服务命令行工具ETL发布!
日志服务命令行工具ETL发布,解决数据采集、分析查询、投递归档、外部整合过程中的数据规整痛点,提供实时、可靠、可扩展、可管理的运行模式支持,以及全面简单的ETL规则,并支持丰富的扩展支持。
3035 0
+关注
云雷
日志计算驱动业务增长 让天下没有难分析的日志
103
文章
2
问答
来源圈子
更多
阿里云存储基于飞天盘古2.0分布式存储系统,产品包括对象存储OSS、块存储Block Storage、共享文件存储NAS、表格存储、日志存储与分析、归档存储及混合云存储等,充分满足用户数据存储和迁移上云需求,连续三年跻身全球云存储魔力象限四强。
+ 订阅
文章排行榜
最热
最新
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载