多账号体系下使用日志服务中心化的管理日志

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 本教程介绍如何实现跨阿里云账号的日志转发, 从而实现日志的统管。

多账号体系下使用日志服务中心化的管理日志


1. 创建资源

开始实验之前,您需要先创建实验相关资源。

  1. 在实验室页面,单击创建资源。

说明:资源创建过程需要1~3分钟。

  1. (可选)在实验室页面左侧导航栏中,单击云产品资源列表,可查看本次实验资源相关信息(例如IP地址、用户信息等)。


2. 创建角色和授权

本步骤将指导您如何在您的阿里云账号上创建投递日志的角色和添加权限,并将该角色信任策略修改为实验室子账号。

  1. 复制下方地址,在您的本机浏览器打开新页签,粘贴并访问RAM访问控制控制台。
https://ram.console.aliyun.com/overview
  1. 在左侧导航栏中,选择身份管理>角色

  1. 角色页面,单击创建角色

  1. 创建角色面板的选择类型中,选择可信实体类型选择阿里云服务,单击下一步

  1. 创建角色面板的配置角色中,角色类型选择普通服务角色,角色名称输入LogReceiver,选择受信服务选择日志服务,单击完成

  1. 创建角色面板的创建完成中,单击为角色授权

  1. 添加权限面板的选择权限区域,在搜索框中搜索AliyunLogFullAccess,单击AliyunLogFullAccess,然后单击确定

说明:本实验为了降低实验的理解成本,为角色授权的权限较大。 在真实项目中,应该遵循最小权限原则,限制授权范围到日志服务特定的Project,并且限制行为到只写日志。

  1. 添加权限面板,单击完成

  1. 角色页面,在搜索框中搜索LogReceiver,单击LogReceiver

  1. 权限管理页签,单击信任策略管理

说明:角色ARN是角色的全局资源描述符,用来指定具体角色。在创建角色后,单击角色名后,可在基本信息页查看其ARN。请您记下您创建角色的ARN,将在步骤五中创建加工规则是使用。

  1. 在信任策略管理页签,单击修改信任策略。

  1. 在修改信任策略面板,将第8行的log.aliyuncs.com修改为<实验室子账号的UID>@log.aliyuncs.com,单击确定

说明

  • 您可在云产品资源列表中查看实验室子账号的UID。
  • 本步骤将实验室子账号的UID添加到该角色的信任策略中,是为了让该角色信任实验室子账号的SLS服务。
  • 如果您对角色的信任策略、授权策略等知识不熟悉,详情请参考访问控制。


3. 创建接收日志的Project和Logstore

本步骤将指导您如何使用您自己的阿里云账号,在日志服务控制台中创建接收日志的Project和Logstore,并开启日志库索引。

说明:本场景中需要使用您自己的阿里云账号创建的Project和Logstore接收日志,会产生相应的费用,请参见计费概述

  1. 复制下方地址,在您的本机浏览器打开新页签,粘贴并访问日志服务控制台。
https://sls.console.aliyun.com/
  1. 日志服务控制台下方的Project列表中,单击创建Project

  1. 在创建Project面板,自定义Project名称所属地域选择为华东1(杭州)或华东2(上海)开通服务日志选择重要日志,日志存储位置选择当前Project,单击确定

说明:因实验室日志服务的Project资源地域所在为华东1(杭州)或华东2(上海),所以建议您自己的阿里云账号创建的Project为同一地域,可以减少额外的流量花销。您可以在云产品资源列表中查看实验室日志服务的Project资源所在地域和Project名称。

  1. 创建成功对话框中,单击确定

  1. 创建Logstore对话框中,Logstore名称输入为application1,单击确定

  1. 创建成功对话框中,单击取消

  1. 日志库区域,单击applocation1

  1. 错误对话框中,单击确定

  1. application1页签,单击开启索引

  1. 查询分析面板,单击确定

  1. 查询分析设置对话框中,单击确认


4. 创建投递日志的Logstore和接入模拟日志

本步骤将指导您如何在实验室子账号上创建投递日志的Logstore和接入NGINX模拟日志。

  1. 切换至实验室页签,双击打开虚拟桌面的Firefox ESR浏览器
  2. 在RAM用户登录框中单击下一步,并复制粘贴页面左上角的子用户密码用户密码输入框,单击登录
  3. 复制下方地址,在Firefox ESR浏览器打开新页签,粘贴并访问日志服务控制台。
https://sls.console.aliyun.com/
  1. 日志服务控制台下方的Project列表中,选择Project资源所在地域,然后单击Project名称。

说明:您可以在云产品资源列表中查看Project资源所在地域和Project名称。

  1. 日志库区域,单击日志库下的 图标。

  1. 创建Logstore对话框中,Logstore名称输入为application2,单击确定

  1. 创建成功对话框中,单击数据接入向导

  1. 快速数据接入对话框,单击模拟接入

  1. 快速数据接入对话框,单击NGINX访问日志下的模拟

  1. 模拟接入页面,单击开始导入

  1. 模拟接入页面,等待大约一分钟,模拟数据生成后,单击开始使用

返回如下页面,您可以看到生成的NGINX模拟日志。


5. 投递日志

  1. 在日志库区域,选择application2>数据处理>加工,单击图标。

  1. application2数据加工页签,单击保存数据加工

  1. 创建数据加工规则面板,输入规则名称,例如LogForwarder,在存储目标区域,单击添加

  1. 创建数据加工规则面板的存储目标区域,配置如下参数。

参数说明:

  • 目标名称:自定义目标名称,例如EnterpriseCLM。
  • 目标Region:选择您的阿里云账号创建接收日志的Project所在地域。
  • 目标Project:输入您的阿里云账号创建接收日志的Project。
  • 目标库:输入您的阿里云账号创建接收日志的Logstore,本示例为application1。
  • 授权方式:选择自定义角色。
  • 角色ARN:输入您在步骤二中创建角色的ARN,您可在角色的基本信息页查看其ARN。ARN的格式如下所示。
acs:ram::<您的阿里云账号的UID>:role/logreceiver。

  1. 创建数据加工规则面板的加工范围区域,时间范围选择所有,单击确定

  1. 创建结果对话框中,单击确认

  1. 日志库区域,选择application2>数据处理>加工>LogForwader

  1. 数据加工概览页签的执行状态区域,选择刷新>自动刷新>15秒

返回如下页面,等待片刻,您即可监控到数据加工时的相关数据。

  1. 在您的本机浏览器,切换到日志服务控制台页签。在application1页签,单击查询/分析

返回如下页面,您即可查看到从实验室子账号的日志服务中投递的日志。


6. 释放资源

本步骤将指导您释放的实验资源。

  1. 释放您的阿里云账号的日志服务资源。

1.1在日志库区域,单击application1,然后单击 图标。

1.2在删除:application1对话框中,单击确认

1.3在左侧导航栏中,单击 图标。

1.4在日志服务控制台下方的Project列表中,找到您创建的Project,单击操作列下的删除

1.5在删除Project面板,输入您的Project名称,选择该Project为测试数据,需要清空,然后单击确定

  1. 释放实验室子账号的日志服务资源。

2.1在您的本机浏览器中,切换到实验室页签,单击右上角的结束体验

2.2在结束确认对话框中,请您为此场景评分,单击确认

实验链接:https://developer.aliyun.com/adc/scenario/f83ba54227ee45118d55c92814c35753


相关实践学习
通过日志服务实现云资源OSS的安全审计
本实验介绍如何通过日志服务实现云资源OSS的安全审计。
相关文章
|
9月前
|
存储 监控 安全
网络安全视角:从地域到账号的阿里云日志审计实践
日志审计的必要性在于其能够帮助企业和组织落实法律要求,打破信息孤岛和应对安全威胁。选择 SLS 下日志审计应用,一方面是选择国家网络安全专用认证的日志分析产品,另一方面可以快速帮助大型公司统一管理多组地域、多个账号的日志数据。除了在日志服务中存储、查看和分析日志外,还可通过报表分析和告警配置,主动发现潜在的安全威胁,增强云上资产安全。
590 100
|
5月前
|
监控 容灾 算法
阿里云 SLS 多云日志接入最佳实践:链路、成本与高可用性优化
本文探讨了如何高效、经济且可靠地将海外应用与基础设施日志统一采集至阿里云日志服务(SLS),解决全球化业务扩展中的关键挑战。重点介绍了高性能日志采集Agent(iLogtail/LoongCollector)在海外场景的应用,推荐使用LoongCollector以获得更优的稳定性和网络容错能力。同时分析了多种网络接入方案,包括公网直连、全球加速优化、阿里云内网及专线/CEN/VPN接入等,并提供了成本优化策略和多目标发送配置指导,帮助企业构建稳定、低成本、高可用的全球日志系统。
632 54
|
11月前
|
XML 安全 Java
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
本文介绍了Java日志框架的基本概念和使用方法,重点讨论了SLF4J、Log4j、Logback和Log4j2之间的关系及其性能对比。SLF4J作为一个日志抽象层,允许开发者使用统一的日志接口,而Log4j、Logback和Log4j2则是具体的日志实现框架。Log4j2在性能上优于Logback,推荐在新项目中使用。文章还详细说明了如何在Spring Boot项目中配置Log4j2和Logback,以及如何使用Lombok简化日志记录。最后,提供了一些日志配置的最佳实践,包括滚动日志、统一日志格式和提高日志性能的方法。
3004 31
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
|
10月前
|
监控 安全 Apache
什么是Apache日志?为什么Apache日志分析很重要?
Apache是全球广泛使用的Web服务器软件,支持超过30%的活跃网站。它通过接收和处理HTTP请求,与后端服务器通信,返回响应并记录日志,确保网页请求的快速准确处理。Apache日志分为访问日志和错误日志,对提升用户体验、保障安全及优化性能至关重要。EventLog Analyzer等工具可有效管理和分析这些日志,增强Web服务的安全性和可靠性。
264 9
|
12月前
|
XML JSON Java
Logback 与 log4j2 性能对比:谁才是日志框架的性能王者?
【10月更文挑战第5天】在Java开发中,日志框架是不可或缺的工具,它们帮助我们记录系统运行时的信息、警告和错误,对于开发人员来说至关重要。在众多日志框架中,Logback和log4j2以其卓越的性能和丰富的功能脱颖而出,成为开发者们的首选。本文将深入探讨Logback与log4j2在性能方面的对比,通过详细的分析和实例,帮助大家理解两者之间的性能差异,以便在实际项目中做出更明智的选择。
1086 3
|
8月前
|
存储 SQL 关系型数据库
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log、原理、写入过程;binlog与redolog区别、update语句的执行流程、两阶段提交、主从复制、三种日志的使用场景;查询日志、慢查询日志、错误日志等其他几类日志
643 35
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
|
7月前
|
监控 Java 应用服务中间件
Tomcat log日志解析
理解和解析Tomcat日志文件对于诊断和解决Web应用中的问题至关重要。通过分析 `catalina.out`、`localhost.log`、`localhost_access_log.*.txt`、`manager.log`和 `host-manager.log`等日志文件,可以快速定位和解决问题,确保Tomcat服务器的稳定运行。掌握这些日志解析技巧,可以显著提高运维和开发效率。
556 13
|
7月前
|
缓存 Java 编译器
|
8月前
|
存储 缓存 关系型数据库
图解MySQL【日志】——Redo Log
Redo Log(重做日志)是数据库中用于记录数据页修改的物理日志,确保事务的持久性和一致性。其主要作用包括崩溃恢复、提高性能和保证事务一致性。Redo Log 通过先写日志的方式,在内存中缓存修改操作,并在适当时候刷入磁盘,减少随机写入带来的性能损耗。WAL(Write-Ahead Logging)技术的核心思想是先将修改操作记录到日志文件中,再择机写入磁盘,从而实现高效且安全的数据持久化。Redo Log 的持久化过程涉及 Redo Log Buffer 和不同刷盘时机的控制参数(如 `innodb_flush_log_at_trx_commit`),以平衡性能与数据安全性。
286 5
图解MySQL【日志】——Redo Log

相关产品

  • 日志服务