日志服务(原SLS)2017-12 月功能发布

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 日志服务12月功能已上线,包括美东Region、嵌入式客户端(C-Producer)、Flink Connector、 CLI、API网关打通、告警优化、控制台快速分析等功能,欢迎试用

[新地域] 美东(弗吉尼亚)访问入口

[新功能] 嵌入式/物联网IoT日志客户端(C-Producer)文档, 使用案例

面向嵌入式、物联网(IoT)客户端C-Producer Library定位为一个“轻量级Logtail”,虽没有实时配置管理机制,但具备除此之外70%功能,包括:

  • 多租户支持:可以对多种日志(例如Metric,DebugLog,ErrorLog)进行优先级
  • 分级处理:同时配置多个客户端,每个客户端可独立配置采集优先级、目的project/logstore等
  • 支持上下文查询:同一个客户端产生的日志在同一上下文中,支持查看某条日志前后相关日志
  • 并发发送/断点续传:支持缓存上线可设置,超过上限后日志写入失败

还有一些专门为IoT准备功能,大大降低数据采集门槛:

  • 本地调试:支持将日志内容输出到本地,并支持轮转、日志数、轮转大小设置
  • 细粒度资源控制:支持针对不同类型数据/日志设置不同的缓存上线、聚合方式
  • 日志压缩缓存:支持将未发送成功的数据压缩缓存,减少设备内存占用

[新功能] Flink Connector 文档, 使用案例

可以方便、快捷Flink开发环境中进行日志服务LogHub中数据开发,包括消费者(Consumer)和生产者(Producer)两个部分。Flink Connector支持如下特性:

  • 设置消费起始位置,方便用户进行消费点的设置
  • 监控,实时获取当前数据消费状态,并通过设置告警知晓延迟的任务
  • 支持消费实例弹性伸缩、容灾、异常恢复,无需关心细节
  • 提供消费级exactly once语义支持,保证数据精确性

[新功能] 命令行工具(CLI)发布 工具地址, 文档

跨平台命令行工具,支持常见所有API操作,并提供日志查询结果导出、批量创建、批量复制等功能:

  • 支持几乎所有50多个日志服务的REST接口
  • 支持多账号, 方便测试与跨域操作
  • 日志查询完整性查询与自动分页.
  • 支持多种方式存储和配置秘钥, 适用于各种情况
  • 支持通过命令行或者文件的形式输入复杂参数, 并校验参数内容格式
  • 支持JMES过滤器对结果进行进一步处理, 方便选择特定信息

[新功能] Nginx日志向导 使用案例

新增Nginx日志向导:在控制台上根据Nginx配置文件一键生成索引、视图、导入(OSS/MaxCompute)等选项,方便用户进行一站式配置

[新功能] API网关日志向导 文档 , 使用案例

推出API网关日志一键打通功能,方便开发者进行日志分析,包括:

  • 秒级实时采集能力,99.9%情况下10秒内即可消费
  • 通过LogHub功能实时计算、流计算对接
  • 通过LogShipper与数据仓库对接
  • 利用LogSearch/Analytics功能进行实时日志查询、分析
  • 通过仪表盘、告警等功能进行线上监控

[新功能] 告警功能升级 文档

  • 新增新增钉钉,自定义WebHook两种新通知渠道:用户可以在通知内容和方式上进行自定义配置并推送自定义地址。
  • 对告警内容进行优化:新增上下文、账号归属人的信息,方便进行问题定位

[控制台] 查询页面新增快速分析功能

提供命中结果1W条数据Top10统计与分布,示例如下:

image.png

[控制台] 新增数据接入向导(Wizard)

数据接⼊向导(Wizard)功能,快速完成数据的采集、存储、分析、离线投递, 降低⽤户使⽤⽇志服务⻔槛,⽬前⽀持的数据源以及⽀持配置如下:

image.png

[控制台] 自动刷新功能

⽀持定时刷新功能,设置时⻓定期刷新所有图表时间范围
image.png

[控制台] 过滤功能

可以指定过滤条件进行视图生成逻辑

image.png

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
1月前
|
安全 Linux 网络安全
/var/log/secure日志详解
Linux系统的 `/var/log/secure` 文件记录安全相关消息,包括身份验证和授权尝试。它涵盖用户登录(成功或失败)、`sudo` 使用、账户锁定解锁及其他安全事件和PAM错误。例如,SSH登录成功会显示"Accepted password",失败则显示"Failed password"。查看此文件可使用 `tail -f /var/log/secure`,但通常只有root用户有权访问。
103 4
|
3天前
|
C++
JNI Log 日志输出
JNI Log 日志输出
12 1
|
3天前
|
存储 运维 大数据
聊聊日志硬扫描,阿里 Log Scan 的设计与实践
泛日志(Log/Trace/Metric)是大数据的重要组成,伴随着每一年业务峰值的新脉冲,日志数据量在快速增长。同时,业务数字化运营、软件可观测性等浪潮又在对日志的存储、计算提出更高的要求。
|
10天前
|
XML Java Maven
Springboot整合与使用log4j2日志框架【详解版】
该文介绍了如何在Spring Boot中切换默认的LogBack日志系统至Log4j2。首先,需要在Maven依赖中排除`spring-boot-starter-logging`并引入`spring-boot-starter-log4j2`。其次,创建`log4j2-spring.xml`配置文件放在`src/main/resources`下,配置包括控制台和文件的日志输出、日志格式和文件切分策略。此外,可通过在不同环境的`application.yml`中指定不同的log4j2配置文件。最后,文章提到通过示例代码解释了日志格式中的各种占位符含义。
|
10天前
|
运维 监控 Go
Golang深入浅出之-Go语言中的日志记录:log与logrus库
【4月更文挑战第27天】本文比较了Go语言中标准库`log`与第三方库`logrus`的日志功能。`log`简单但不支持日志级别配置和多样化格式,而`logrus`提供更丰富的功能,如日志级别控制、自定义格式和钩子。文章指出了使用`logrus`时可能遇到的问题,如全局logger滥用、日志级别设置不当和过度依赖字段,并给出了避免错误的建议,强调理解日志级别、合理利用结构化日志、模块化日志管理和定期审查日志配置的重要性。通过这些实践,开发者能提高应用监控和故障排查能力。
87 1
|
11天前
|
弹性计算 运维 Shell
|
14天前
|
SQL 分布式计算 监控
日志服务主要功能
本文介绍日志服务主要的功能。
30 2
|
15天前
|
缓存 Java 测试技术
Java多线程实战-实现多线程文件下载,支持断点续传、日志记录等功能
Java多线程实战-实现多线程文件下载,支持断点续传、日志记录等功能
|
18天前
|
Java
log4j异常日志过滤规则配置
log4j异常日志过滤规则配置
90 0
|
21天前
|
SQL 存储 监控
SLS 查询新范式:使用 SPL 对日志进行交互式探索
像 Unix 命令一样支持多级管道级联,像加工预览一样实时处理查询结果,更便捷的交互,更丰富的算子,更灵活的探索半结构化日志,快来试试使用 SPL 语言查询日志数据吧~
46298 3

相关产品

  • 日志服务