日志服务(原SLS)2017-12 月功能发布

简介: 日志服务12月功能已上线,包括美东Region、嵌入式客户端(C-Producer)、Flink Connector、 CLI、API网关打通、告警优化、控制台快速分析等功能,欢迎试用

[新地域] 美东(弗吉尼亚)访问入口

[新功能] 嵌入式/物联网IoT日志客户端(C-Producer)文档, 使用案例

面向嵌入式、物联网(IoT)客户端C-Producer Library定位为一个“轻量级Logtail”,虽没有实时配置管理机制,但具备除此之外70%功能,包括:

  • 多租户支持:可以对多种日志(例如Metric,DebugLog,ErrorLog)进行优先级
  • 分级处理:同时配置多个客户端,每个客户端可独立配置采集优先级、目的project/logstore等
  • 支持上下文查询:同一个客户端产生的日志在同一上下文中,支持查看某条日志前后相关日志
  • 并发发送/断点续传:支持缓存上线可设置,超过上限后日志写入失败

还有一些专门为IoT准备功能,大大降低数据采集门槛:

  • 本地调试:支持将日志内容输出到本地,并支持轮转、日志数、轮转大小设置
  • 细粒度资源控制:支持针对不同类型数据/日志设置不同的缓存上线、聚合方式
  • 日志压缩缓存:支持将未发送成功的数据压缩缓存,减少设备内存占用

[新功能] Flink Connector 文档, 使用案例

可以方便、快捷Flink开发环境中进行日志服务LogHub中数据开发,包括消费者(Consumer)和生产者(Producer)两个部分。Flink Connector支持如下特性:

  • 设置消费起始位置,方便用户进行消费点的设置
  • 监控,实时获取当前数据消费状态,并通过设置告警知晓延迟的任务
  • 支持消费实例弹性伸缩、容灾、异常恢复,无需关心细节
  • 提供消费级exactly once语义支持,保证数据精确性

[新功能] 命令行工具(CLI)发布 工具地址, 文档

跨平台命令行工具,支持常见所有API操作,并提供日志查询结果导出、批量创建、批量复制等功能:

  • 支持几乎所有50多个日志服务的REST接口
  • 支持多账号, 方便测试与跨域操作
  • 日志查询完整性查询与自动分页.
  • 支持多种方式存储和配置秘钥, 适用于各种情况
  • 支持通过命令行或者文件的形式输入复杂参数, 并校验参数内容格式
  • 支持JMES过滤器对结果进行进一步处理, 方便选择特定信息

[新功能] Nginx日志向导 使用案例

新增Nginx日志向导:在控制台上根据Nginx配置文件一键生成索引、视图、导入(OSS/MaxCompute)等选项,方便用户进行一站式配置

[新功能] API网关日志向导 文档 , 使用案例

推出API网关日志一键打通功能,方便开发者进行日志分析,包括:

  • 秒级实时采集能力,99.9%情况下10秒内即可消费
  • 通过LogHub功能实时计算、流计算对接
  • 通过LogShipper与数据仓库对接
  • 利用LogSearch/Analytics功能进行实时日志查询、分析
  • 通过仪表盘、告警等功能进行线上监控

[新功能] 告警功能升级 文档

  • 新增新增钉钉,自定义WebHook两种新通知渠道:用户可以在通知内容和方式上进行自定义配置并推送自定义地址。
  • 对告警内容进行优化:新增上下文、账号归属人的信息,方便进行问题定位

[控制台] 查询页面新增快速分析功能

提供命中结果1W条数据Top10统计与分布,示例如下:

image.png

[控制台] 新增数据接入向导(Wizard)

数据接⼊向导(Wizard)功能,快速完成数据的采集、存储、分析、离线投递, 降低⽤户使⽤⽇志服务⻔槛,⽬前⽀持的数据源以及⽀持配置如下:

image.png

[控制台] 自动刷新功能

⽀持定时刷新功能,设置时⻓定期刷新所有图表时间范围
image.png

[控制台] 过滤功能

可以指定过滤条件进行视图生成逻辑

image.png

相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
目录
相关文章
|
监控 容灾 算法
阿里云 SLS 多云日志接入最佳实践:链路、成本与高可用性优化
本文探讨了如何高效、经济且可靠地将海外应用与基础设施日志统一采集至阿里云日志服务(SLS),解决全球化业务扩展中的关键挑战。重点介绍了高性能日志采集Agent(iLogtail/LoongCollector)在海外场景的应用,推荐使用LoongCollector以获得更优的稳定性和网络容错能力。同时分析了多种网络接入方案,包括公网直连、全球加速优化、阿里云内网及专线/CEN/VPN接入等,并提供了成本优化策略和多目标发送配置指导,帮助企业构建稳定、低成本、高可用的全球日志系统。
1559 55
|
存储 缓存 关系型数据库
图解MySQL【日志】——Redo Log
Redo Log(重做日志)是数据库中用于记录数据页修改的物理日志,确保事务的持久性和一致性。其主要作用包括崩溃恢复、提高性能和保证事务一致性。Redo Log 通过先写日志的方式,在内存中缓存修改操作,并在适当时候刷入磁盘,减少随机写入带来的性能损耗。WAL(Write-Ahead Logging)技术的核心思想是先将修改操作记录到日志文件中,再择机写入磁盘,从而实现高效且安全的数据持久化。Redo Log 的持久化过程涉及 Redo Log Buffer 和不同刷盘时机的控制参数(如 `innodb_flush_log_at_trx_commit`),以平衡性能与数据安全性。
1101 5
图解MySQL【日志】——Redo Log
|
缓存 Java 编译器
|
监控 Java 应用服务中间件
Tomcat log日志解析
理解和解析Tomcat日志文件对于诊断和解决Web应用中的问题至关重要。通过分析 `catalina.out`、`localhost.log`、`localhost_access_log.*.txt`、`manager.log`和 `host-manager.log`等日志文件,可以快速定位和解决问题,确保Tomcat服务器的稳定运行。掌握这些日志解析技巧,可以显著提高运维和开发效率。
1947 13
|
SQL 关系型数据库 MySQL
MySQL事务日志-Undo Log工作原理分析
事务的持久性是交由Redo Log来保证,原子性则是交由Undo Log来保证。如果事务中的SQL执行到一半出现错误,需要把前面已经执行过的SQL撤销以达到原子性的目的,这个过程也叫做"回滚",所以Undo Log也叫回滚日志。
1098 7
MySQL事务日志-Undo Log工作原理分析
|
运维 监控 虚拟化
除了实时性能监控,Hyper-V还支持日志记录和警报功能你知道吗?
Hyper-V不仅支持实时性能监控,还具备强大的日志记录和警报功能。通过事件查看器可访问详细的日志文件,涵盖虚拟机管理、配置及Hypervisor事件,帮助故障排查和性能分析。警报功能支持预定义和自定义规则,可通过多种方式通知管理员,确保及时响应问题,保障虚拟化环境的稳定运行。
|
SQL 存储 关系型数据库
简单聊聊MySQL的三大日志(Redo Log、Binlog和Undo Log)各有什么区别
在MySQL数据库管理中,理解Redo Log(重做日志)、Binlog(二进制日志)和Undo Log(回滚日志)至关重要。Redo Log确保数据持久性和崩溃恢复;Binlog用于主从复制和数据恢复,记录逻辑操作;Undo Log支持事务的原子性和隔离性,实现回滚与MVCC。三者协同工作,保障事务ACID特性。文章还详细解析了日志写入流程及可能的异常情况,帮助深入理解数据库日志机制。
2135 0

相关产品

  • 日志服务