ELK日志分析分享

简介:

相信很多公司都有使用ELK作为运维的日志分析工具,简单、方便、美观,但是却很少有人把自己的分析成果分享出来,以下为我根据公司的具体情况做的dashboard,如果有什么建议或意见欢迎在博客下方评论,以下只针对负载均衡器做了相关分析。

1.总体访问情况

wKiom1eQLFTi863wAAFBRhrJTZk405.png

网站大盘信息,显示的主要就是请求数和IP数,以及失败请求和访问失败的IP和恶意请求数和恶意IP

访问失败数:获取的是状态为500-599和404的错误值

恶意请求:恶意访问就包含恶意解析以及恶意爬虫等信息


2.运营分析

wKioL1eQLQWC3Y30AAGEaakb7wY011.png

因为我们是电子商务网站,且同时运营了2个,因此就存在对比。

这里包含了商品浏览量以及下单次数

商品浏览者的地域信息,以及浏览的时间及高峰期

浏览最多的商品


3.搜索引擎分析

wKiom1eQLbHx9SECAAIcMPQsrKk087.png

我们分析爬虫的占比以及爬行的时间,爬行的站点,以及针对主站的爬行时间进行单独出来


4.访客分析

wKioL1eQLh2jfptfAAJIzqmrOGs022.png

这里有TOP10的客户端设备,客户端操作系统,客户端浏览器

访客省份,访客城市


5.服务状态

wKioL1eQLnngEVzyAAFJrimJENY043.png

服务状态包含了方法,以及状态码,以及各类状态码的TOP请求资源


6.服务质量

wKioL1eQLtLRmuhPAAEbKhnv0fE660.png

服务质量就包含了平均响应时间和耗时的占比,如500ms一下的占比,各个阶梯,最慢的网站排行,以及最慢的访问资源


7.服务异常

wKiom1eQLzbwi7hMAAEUTnlKFLI754.png异常服务的状态码占比,以及各个状态码的曲线和异常状态码的请求资源以便我们及时发现异常的请求



基于以上我们发现ELK对于我们运营,运维等都能从中获取参考信息。本文最主要的就是想让大家个我们提出意见或者建议,所以非常欢迎大家评论及参考。


本文转自 rong341233 51CTO博客,原文链接:http://blog.51cto.com/fengwan/1828277


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
1月前
|
存储 监控 数据可视化
日志分析对决:揭示 ELK 与 GrayLog 的优势和差异
日志分析对决:揭示 ELK 与 GrayLog 的优势和差异
427 0
|
16天前
|
存储 编解码 监控
实验模拟 搭建elk 日志分析系统
实验模拟 搭建elk 日志分析系统
|
16天前
|
存储 监控 Java
ELK 企业级日志分析系统 简单介绍
ELK 企业级日志分析系统 简单介绍
|
23天前
|
监控 应用服务中间件 nginx
使用 Docker Compose V2 快速搭建日志分析平台 ELK (Elasticsearch、Logstash 和 Kibana)
ELK的架构有多种,本篇分享使用的架构如图所示: Beats(Filebeat) -> -> Elasticsearch -> Kibana,目前生产环境一天几千万的日志,内存占用大概 10G
57 4
|
1月前
|
消息中间件 存储 运维
更优性能与性价比,从自建 ELK 迁移到 SLS 开始
本文介绍了 SLS 基本能力,并和开源自建 ELK 做了对比,可以看到 SLS 相比开源 ELK 有较大优势。
55495 148
|
1月前
|
存储 Prometheus 索引
日志系统新贵Loki,确实比笨重的ELK轻
日志系统新贵Loki,确实比笨重的ELK轻
41 0
|
1月前
|
存储 监控 关系型数据库
ELK架构监控MySQL慢日志
ELK架构监控MySQL慢日志
|
12天前
|
SQL 监控 关系型数据库
|
7天前
|
SQL 数据采集 DataWorks
DataWorks产品使用合集之pyodps的线程限制是什么意思
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
7天前
|
DataWorks 数据可视化 安全
DataWorks产品使用合集之SLS日志中新增了存在iotId这个字段,同步的时候怎么手动增加
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。

热门文章

最新文章