AI 助理
备案控制台
开发者社区 云原生 文章 正文

《2021 阿里云可观测技术峰会演讲实录合辑（下）》——一、基于OPLG从0到1构建统一可观测平台实践——场景实践3：基于Loki的日志查询分析

2023-05-22 271
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
Serverless 应用引擎 SAE，800核*时 1600GiB*时
推荐场景：
阿里云宣布 Serverless 应用引擎 SAE2.0 将公测上线，多款产品全新升级
容器服务 Serverless 版 ACK Serverless，317元额度 多规格
可观测可视化 Grafana 版，10个用户账号 1个月
简介： 《2021 阿里云可观测技术峰会演讲实录合辑（下）》——一、基于OPLG从0到1构建统一可观测平台实践——场景实践3：基于Loki的日志查询分析

由于ARMS目前还没有提供商业化的Loki服务，因此本文将以官网的Grafana示例演示Loki的接入效果。

image.png

完成日志接入之后，可以基于Loki提供的LokiQL快速过滤。它还针对关键的索引字段建立了索引，基于这些字段可以进一步提升检索速度。

image.png

基于Loki可以定制形态较为丰富的图表。上图为官网提供的Loki Nginx大盘，统计的数值或地域的分布等都可以通过LogQL定制，非常灵活。

文章标签：
日志服务
应用服务中间件
索引
nginx
关键词：
阿里云日志服务
日志服务技术
日志服务查询
日志服务分析
日志服务查询分析
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
技术小达人
目录
相关文章
土木林森
|
19天前
|
存储 数据采集 数据处理
【Flume拓扑揭秘】掌握Flume的四大常用结构，构建强大的日志收集系统！
【8月更文挑战第24天】Apache Flume是一个强大的工具，专为大规模日志数据的收集、聚合及传输设计。其核心架构包括源（Source）、通道（Channel）与接收器（Sink）。Flume支持多样化的拓扑结构以适应不同需求，包括单层、扇入（Fan-in）、扇出（Fan-out）及复杂多层拓扑。单层拓扑简单直观，适用于单一数据流场景；扇入结构集中处理多源头数据；扇出结构则实现数据多目的地分发；复杂多层拓扑提供高度灵活性，适合多层次数据处理。通过灵活配置，Flume能够高效构建各种规模的数据收集系统。
土木林森
26 0
土木林森
|
19天前
|
存储 分布式计算 大数据
【Flume的大数据之旅】探索Flume如何成为大数据分析的得力助手，从日志收集到实时处理一网打尽！
【8月更文挑战第24天】Apache Flume是一款高效可靠的数据收集系统，专为Hadoop环境设计。它能在数据产生端与分析/存储端间搭建桥梁，适用于日志收集、数据集成、实时处理及数据备份等多种场景。通过监控不同来源的日志文件并将数据标准化后传输至Hadoop等平台，Flume支持了性能监控、数据分析等多种需求。此外，它还能与Apache Storm或Flink等实时处理框架集成，实现数据的即时分析。下面展示了一个简单的Flume配置示例，说明如何将日志数据导入HDFS进行存储。总之，Flume凭借其灵活性和强大的集成能力，在大数据处理流程中占据了重要地位。
土木林森
32 3
游客mldfis24krfue
|
20天前
|
应用服务中间件 Linux nginx
在Linux中，如何统计ip访问情况？分析 nginx 访问日志？如何找出访问页面数量在前十位的ip？
在Linux中，如何统计ip访问情况？分析 nginx 访问日志？如何找出访问页面数量在前十位的ip？
游客mldfis24krfue
43 2
qhhf_地道酬勤
|
13天前
|
存储 消息中间件 监控
Java日志详解：日志级别，优先级、配置文件、常见日志管理系统ELK、日志收集分析
Java日志详解：日志级别，优先级、配置文件、常见日志管理系统、日志收集分析。日志级别从小到大的关系（优先级从低到高）： ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < OFF 低级别的会输出高级别的信息，高级别的不会输出低级别的信息
qhhf_地道酬勤
18 0
风吹落叶花飘荡
|
14天前
|
算法 关系型数据库 程序员
第一周算法设计与分析：A : log2(N)
这篇文章介绍了解决算法问题"输入一个数N，输出log2N（向下取整）"的三种编程思路，包括使用对数函数和幂函数的转换方法，以及避免浮点数精度问题的整数逼近方法。
风吹落叶花飘荡
28 0
路边两盏灯
|
17天前
|
SQL JavaScript 前端开发
【Azure 应用服务】Azure JS Function 异步方法中执行SQL查询后，Callback函数中日志无法输出问题
【Azure 应用服务】Azure JS Function 异步方法中执行SQL查询后，Callback函数中日志无法输出问题
路边两盏灯
65 0
路边两盏灯
|
17天前
|
Kubernetes Ubuntu Windows
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
路边两盏灯
82 3
东方睿赢
|
10天前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储，但它凭借自身独特的存储架构和功能，为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储，但它凭借自身独特的存储架构和功能，为用户提供了一种专业、高效的日志服务解决方案。
东方睿赢
43 9
路边两盏灯
|
18天前
|
开发框架 .NET Docker
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题
路边两盏灯
63 1
wljslmz
|
22天前
|
存储 监控 安全
简化日志管理：如何用单一命令清除所有日志文件
【8月更文挑战第20天】
wljslmz
86 2

云原生

热门文章

最新文章

  • 1
    Docker 镜像加速器
  • 2
    Docker CE 镜像源站
  • 3
    Minikube - Kubernetes本地实验环境
  • 4
    微服务架构的理论基础 - 康威定律
  • 5
    微服务（Microservice）那点事
  • 6
    Docker的Windows容器初体验
  • 7
    3分钟，了解阿里云热门开发者工具 Cloud Toolkit
  • 8
    Docker学习路线图 (持续更新中)
  • 9
    基于Docker的Tensorflow实验环境
  • 10
    Docker常见故障排查指南 - 阿里云容器服务
  • 1
    模板建站真的不利于seo吗？
    14
  • 2
    PageAdmin建站模板，无需代码也能建站。
    10
  • 3
    枚举与结构体的应用：C#中的数据组织艺术
    13
  • 4
    【Azure Cloud Service】在Azure云服务中收集CPU监控指标和IIS进程的DUMP方法
    15
  • 5
    如何搭建一个手机网站？
    11
  • 6
    C#一分钟浅谈：泛型编程基础
    17
  • 7
    个人怎么样做网站？我想做个网站怎么样做？
    37
  • 8
    【Azure Service Bus】创建 ServiceBus 的Terraform脚本报错GetAuthorizationRule: Invalid input
    18
  • 9
    网站如何制作？不懂代码也可以也能做。
    17
  • 10
    阿里云微服务引擎 MSE 及 云原生 API 网关 2024 年 08 月产品动态
    17

    • 相关课程

    更多
  • 基于MongoDB构建实时日志分析平台
  • 日志服务SLS实现云产品可观测
  • 日志服务 SLS 可观测数据分析平台介绍
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
  • 场景实践-基于阿里云Quick BI 对MOOC网站日志分析
  • 可观测能力升级系列课程

    • 相关电子书

    更多
  • PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final
  • Kubernetes下日志实时采集、存储与计算实践
  • 日志数据采集与分析对接

    • 相关实验场景

    更多
  • 虎虎生威，挑战云上魔方
  • 通过日志服务实现云资源OSS的安全审计
  • 如何将OSS数据导入至SLS中进行分析
  • 日志服务之使用Nginx模式采集日志
  • 零基础入门Serverless：基于函数计算快速搭建基于人工智能的目标检测系统
  • 专属钉底座交付培训课程
    • 下一篇
    对象存储 OSS 如何创建 bucket|学习笔记