日志服务(Log Service)

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介:

注册

日志服务(Log Service)简称LOG,原称SLS。是针对日志场景的一站式解决方案。提供海量日志数据采集、订阅、转储与查询功能。日志服务是阿里云提供的一整套非常优秀的日志管理平台。在您使用日志服务完成了对ECS日志的管理的前提下,实时计算可以直接对接日志服务的LogHub存储,无需您进行数据搬运。

注意: 日志服务在公有云使用时,需要您授予实时计算代为您访问日志服务权限(具体请参看流计算角色授权),否则可能出现报错“No Permission”的情况。

4

Endpoint填写

填写日志服务的Endpoint。不同的地域下日志服务有不同的Project,请查看日志服务Endpoint地址

说明:

  • 上述提供的是日志服务在阿里云内网地址,流计算和日志服务在同一个阿里云内网,不建议用户填写外网地址,因为需要消耗大量外网带宽。
  • VPC模式支持: 注意当前流计算不提供VPC模式,因此流计算当前使用日志服务的经典网络地址(Endpoint)即可。
  • 有关专有云的Endpoint填写,请联系您的专有云系统管理员咨询有关日志服务 Endpoint的地址。

Project填写

填写日志服务的Project。

注意:跨属主的数据存储不能注册。例如A用户拥有日志服务的ProjectA,但B用户希望在流计算使用ProjectA,目前流计算暂不支持这类使用场景下的注册,若需使用,可使用明文方式,具体见创建日志服务源表创建日志服务结果表

使用场景

由于日志服务本身是流数据存储,实时计算只能将其作为流式数据输入和输出,无法作为维表引用。有关日志服务DDL定义,请参看具体章节。

常见问题

Q: 为什么我注册失败,失败原因提示XXX?

A: 实时计算的数据存储页面能够协助您完成数据管理,其本身就是使用相关存储SDK代为访问各类存储。因此很多情况下可能是您注册过程出现问题导致。请排查如下原因。

  • 请确认是否已经开通并拥有日志服务的Project。请登录日志服务控制台,公有云用户可以访问日志服务控制台看您是否有权限访问您的Project。
  • 请确认您是日志服务 Project的属主。跨属主的数据存储不能注册。例如,A用户拥有日志服务的ProjectA,但B用户希望在流计算使用ProjectA。目前流计算暂不支持这类使用场景下的注册,若需使用,可使用明文方式,具体见创建日志服务源表创建日志服务结果表
  • 请确认您填写的日志服务的Endpoint和Project完全正确。特别注意的是日志服务 Endpoint必须以http开头,且不能以(/)结尾,例如http://cn-hangzhou.log.aliyuncs.com是正确的,但http://cn-hangzhou.log.aliyuncs.com/是错误的。
  • 请不要重复注册。实时计算提供注册检测机制,避免您重复注册。

Q: 为什么数据抽样仅仅针对时间抽样,不支持其他字段抽样?

A: 日志服务定位是流数据存储,对外提供的接口也只有时间参数。因此,实时计算也只能提供基于时间的抽样。如果希望使用日志服务的检索功能,请登录日志服务控制台使用检索。

本文转自实时计算——日志服务(Log Service)

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
17天前
|
Java
使用Java代码打印log日志
使用Java代码打印log日志
73 1
|
18天前
|
Linux Shell
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
72 1
|
22天前
|
SQL 关系型数据库 MySQL
MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复
对于MySQL数据库,可以使用二进制日志(binary log)进行时间点恢复。二进制日志是MySQL中记录所有数据库更改操作的日志文件。要进行时间点恢复,您需要执行以下步骤: 1. 确保MySQL配置文件中启用了二进制日志功能。在配置文件(通常是my.cnf或my.ini)中找到以下行,并确保没有被注释掉: Copy code log_bin = /path/to/binary/log/file 2. 在需要进行恢复的时间点之前创建一个数据库备份。这将作为恢复的基准。 3. 找到您要恢复到的时间点的二进制日志文件和位置。可以通过执行以下命令来查看当前的二进制日志文件和位
|
28天前
|
监控 Shell Linux
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
48 0
|
29天前
|
存储 数据库
ALTER MATERIALIZED VIEW LOG :语句来更改现有物化视图日志的存储特征或类型。
`ALTER MATERIALIZED VIEW LOG` 语句用于修改已有的物化视图日志的存储属性或类型。配合示例中的动画图像(由于格式限制无法显示),该语句帮助优化数据库的性能和管理。
44 0
|
23天前
|
XML 运维 监控
【深入探究 C++ 日志库清理策略】glog、log4cplus 和 spdlog 的日志文件管理策略
【深入探究 C++ 日志库清理策略】glog、log4cplus 和 spdlog 的日志文件管理策略
62 0
|
30天前
|
安全 编译器 API
C++系统日志库精选:深入剖析glog与log4cplus,轻松搭建高效日志系统
C++系统日志库精选:深入剖析glog与log4cplus,轻松搭建高效日志系统
90 0
|
SQL 数据采集 监控
基于日志服务数据加工分析Java异常日志
采集并脱敏了整个5月份的项目异常日志,准备使用日志服务数据加工做数据清洗以及分析。本案例是基于使用阿里云相关产品(OSS,RDS,SLS等)的SDK展开自身业务。需要对异常日志做解析,将原始日志中时间、错误码、错误信息、状态码、产品信息、请求方法、出错行号提取出来。然后根据提取出来的不同产品信息做多目标分发处理。对清洗后的数据做异常日志数据分析。
709 0
基于日志服务数据加工分析Java异常日志
|
3月前
|
Java Spring
【Spring Boot】logback和log4j日志异常处理
【1月更文挑战第25天】【Spring Boot】logback和log4j日志异常处理
|
1月前
|
存储
Hudi Log日志文件格式分析(一)
Hudi Log日志文件格式分析(一)
25 1

热门文章

最新文章