日志服务(Log Service)

本文涉及的产品
实时计算 Flink 版,1000CU*H 3个月
日志服务 SLS,月写入数据量 50GB 1个月
简介:

注册

日志服务(Log Service)简称LOG,原称SLS。是针对日志场景的一站式解决方案。提供海量日志数据采集、订阅、转储与查询功能。日志服务是阿里云提供的一整套非常优秀的日志管理平台。在您使用日志服务完成了对ECS日志的管理的前提下,实时计算可以直接对接日志服务的LogHub存储,无需您进行数据搬运。

注意: 日志服务在公有云使用时,需要您授予实时计算代为您访问日志服务权限(具体请参看流计算角色授权),否则可能出现报错“No Permission”的情况。

4

Endpoint填写

填写日志服务的Endpoint。不同的地域下日志服务有不同的Project,请查看日志服务Endpoint地址

说明:

  • 上述提供的是日志服务在阿里云内网地址,流计算和日志服务在同一个阿里云内网,不建议用户填写外网地址,因为需要消耗大量外网带宽。
  • VPC模式支持: 注意当前流计算不提供VPC模式,因此流计算当前使用日志服务的经典网络地址(Endpoint)即可。
  • 有关专有云的Endpoint填写,请联系您的专有云系统管理员咨询有关日志服务 Endpoint的地址。

Project填写

填写日志服务的Project。

注意:跨属主的数据存储不能注册。例如A用户拥有日志服务的ProjectA,但B用户希望在流计算使用ProjectA,目前流计算暂不支持这类使用场景下的注册,若需使用,可使用明文方式,具体见创建日志服务源表创建日志服务结果表

使用场景

由于日志服务本身是流数据存储,实时计算只能将其作为流式数据输入和输出,无法作为维表引用。有关日志服务DDL定义,请参看具体章节。

常见问题

Q: 为什么我注册失败,失败原因提示XXX?

A: 实时计算的数据存储页面能够协助您完成数据管理,其本身就是使用相关存储SDK代为访问各类存储。因此很多情况下可能是您注册过程出现问题导致。请排查如下原因。

  • 请确认是否已经开通并拥有日志服务的Project。请登录日志服务控制台,公有云用户可以访问日志服务控制台看您是否有权限访问您的Project。
  • 请确认您是日志服务 Project的属主。跨属主的数据存储不能注册。例如,A用户拥有日志服务的ProjectA,但B用户希望在流计算使用ProjectA。目前流计算暂不支持这类使用场景下的注册,若需使用,可使用明文方式,具体见创建日志服务源表创建日志服务结果表
  • 请确认您填写的日志服务的Endpoint和Project完全正确。特别注意的是日志服务 Endpoint必须以http开头,且不能以(/)结尾,例如http://cn-hangzhou.log.aliyuncs.com是正确的,但http://cn-hangzhou.log.aliyuncs.com/是错误的。
  • 请不要重复注册。实时计算提供注册检测机制,避免您重复注册。

Q: 为什么数据抽样仅仅针对时间抽样,不支持其他字段抽样?

A: 日志服务定位是流数据存储,对外提供的接口也只有时间参数。因此,实时计算也只能提供基于时间的抽样。如果希望使用日志服务的检索功能,请登录日志服务控制台使用检索。

本文转自实时计算——日志服务(Log Service)

相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
相关文章
|
7月前
|
监控 容灾 算法
阿里云 SLS 多云日志接入最佳实践:链路、成本与高可用性优化
本文探讨了如何高效、经济且可靠地将海外应用与基础设施日志统一采集至阿里云日志服务(SLS),解决全球化业务扩展中的关键挑战。重点介绍了高性能日志采集Agent(iLogtail/LoongCollector)在海外场景的应用,推荐使用LoongCollector以获得更优的稳定性和网络容错能力。同时分析了多种网络接入方案,包括公网直连、全球加速优化、阿里云内网及专线/CEN/VPN接入等,并提供了成本优化策略和多目标发送配置指导,帮助企业构建稳定、低成本、高可用的全球日志系统。
805 54
|
8月前
|
存储 Windows
【Azure Cloud Service】微软云服务上的日志收集方法
本文介绍了在使用微软云服务(Cloud Service Extended Support)时,如何收集日志以分析未记录在应用日志中的服务异常。由于云服务基于传统虚拟机模式,需通过远程桌面登录实例,查看IIS、Windows Event及云服务组件日志(如WindowsAzureGuestAgent)。此外,可使用CollectGuestLogs.exe工具打包日志,或通过“File Server Resource Manager”检查日志存储配额是否不足。附参考文档链接供深入学习。
265 31
|
8月前
|
存储 监控 API
【Azure App Service】分享使用Python Code获取App Service的服务器日志记录管理配置信息
本文介绍了如何通过Python代码获取App Service中“Web服务器日志记录”的配置状态。借助`azure-mgmt-web` SDK,可通过初始化`WebSiteManagementClient`对象、调用`get_configuration`方法来查看`http_logging_enabled`的值,从而判断日志记录是否启用及存储方式(关闭、存储或文件系统)。示例代码详细展示了实现步骤,并附有执行结果与官方文档参考链接,帮助开发者快速定位和解决问题。
238 22
|
9月前
|
API 开发工具 Python
|
10月前
|
存储 缓存 关系型数据库
图解MySQL【日志】——Redo Log
Redo Log(重做日志)是数据库中用于记录数据页修改的物理日志,确保事务的持久性和一致性。其主要作用包括崩溃恢复、提高性能和保证事务一致性。Redo Log 通过先写日志的方式,在内存中缓存修改操作,并在适当时候刷入磁盘,减少随机写入带来的性能损耗。WAL(Write-Ahead Logging)技术的核心思想是先将修改操作记录到日志文件中,再择机写入磁盘,从而实现高效且安全的数据持久化。Redo Log 的持久化过程涉及 Redo Log Buffer 和不同刷盘时机的控制参数(如 `innodb_flush_log_at_trx_commit`),以平衡性能与数据安全性。
447 5
图解MySQL【日志】——Redo Log
|
9月前
|
监控 Java 应用服务中间件
Tomcat log日志解析
理解和解析Tomcat日志文件对于诊断和解决Web应用中的问题至关重要。通过分析 `catalina.out`、`localhost.log`、`localhost_access_log.*.txt`、`manager.log`和 `host-manager.log`等日志文件,可以快速定位和解决问题,确保Tomcat服务器的稳定运行。掌握这些日志解析技巧,可以显著提高运维和开发效率。
838 13
|
9月前
|
缓存 Java 编译器
|
9月前
|
SQL 存储 关系型数据库
简单聊聊MySQL的三大日志(Redo Log、Binlog和Undo Log)各有什么区别
在MySQL数据库管理中,理解Redo Log(重做日志)、Binlog(二进制日志)和Undo Log(回滚日志)至关重要。Redo Log确保数据持久性和崩溃恢复;Binlog用于主从复制和数据恢复,记录逻辑操作;Undo Log支持事务的原子性和隔离性,实现回滚与MVCC。三者协同工作,保障事务ACID特性。文章还详细解析了日志写入流程及可能的异常情况,帮助深入理解数据库日志机制。
1070 0
|
10月前
|
存储 关系型数据库 MySQL
图解MySQL【日志】——Undo Log
Undo Log(回滚日志)是 MySQL 中用于实现事务原子性和一致性的关键机制。在默认的自动提交模式下,MySQL 隐式开启事务,每条增删改语句都会记录到 Undo Log 中。其主要作用包括:
324 0

热门文章

最新文章