日志服务(2018-08)6月新功能发布

本文涉及的产品
对象存储 OSS,20GB 3个月
日志服务 SLS,月写入数据量 50GB 1个月
对象存储 OSS,恶意文件检测 1000次 1年
简介: 阿里云日志服务6月新功能发布

Logstore支持Shard自动分裂

日志服务提供shard的split和merge功能,用户可以根据需求调整Logstore处理能力。在打开自动分裂后,服务会自动根据当前流量进行评估,当超过当前流量一段时间后系统会自动分裂Logstore下Shard数目,达到自适应流量目的。

查询分析(LogSearch/Analytics) 支持外部MySQL联合查询/结果写入

日志服务新增Join功能,可以在查询分析阶段对外部MySQL中数据进行联合查询,增强查询体验。同时支持将计算结果写入MySQL表中。(当前MySQL功能需要通过CLI 进行配置)

通过联合查询功能,可以进一步提升日志分析能力。

查询分析(LogSearch/Analytics) 新增JSON/Array/Map展开、空间几何运算、地理(GeoHash)函数支持

日志服务查询分析(LogSearch/Analytics)新增JSON/Array(unnest)展开、空间几何运算、地理(GeoHash)函数支持,主要包括:

  1. 对元素中的Json/Array/Map数据进行行展开
  2. Well-Known Text (WKT) 格式描述的几何实体之间的位置、距离、大小等运算
  3. 根据经纬度计算GeoHash位置

通过新增函数提升多样日志数据分析能力。

Logtail支持Beats/Logstash协议

日志服务Logtail支持Lumberjack协议作为输入源,可支持将Beats系列软件(MetricBeat、PacketBeat、Winlogbeat、Auditbeat、Filebeat、Heartbeat等)、Logstash采集数据转发到日志服务。支持各类软件/应用Metric、各类网络协议、审计、Windows事件等数据实时采集到日志服务,便于对这类数据有存储、检索、统计、监控需求的用户快速接入。

数据接入向导支持IIS日志配置

日志服务支持IIS日志采集,包括Microsoft IIS日志格式、NCSA公用日志文件格式、W3C扩展文件日志格式三种,默认格式为W3C。
通过数据接入向导,可以在不到1分钟时间内一站式完成IIS日志接入、配置以及可视化报表等功能。

Logtail 快速诊断工具升级

Logtail 快速诊断工具升级,提升异常诊断准确性以及交互体验

日志服务Logtail快速诊断工具功能升级,支持交互式诊断功能,根据诊断问题以及用户选择自动选择诊断项目,大大提升异常诊断准确性以及交互体验。

日志服务控制台体验优化

控制台体验完成如下优化:

  • JSON类型字段子项最大配置从20个提高到50个
  • 优化查询分析框换行功能,用户可根据喜好选择Ctrl+Enter换行还是Enter换行,并提供自动换行
  • 优化错误提示窗UI以及错误信息
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
1月前
|
XML Java Maven
Spring5入门到实战------16、Spring5新功能 --整合日志框架(Log4j2)
这篇文章是Spring5框架的入门到实战教程,介绍了Spring5的新功能——整合日志框架Log4j2,包括Spring5对日志框架的通用封装、如何在项目中引入Log4j2、编写Log4j2的XML配置文件,并通过测试类展示了如何使用Log4j2进行日志记录。
Spring5入门到实战------16、Spring5新功能 --整合日志框架(Log4j2)
|
3月前
|
Java Spring 容器
Spring5系列学习文章分享---第六篇(框架新功能系列+整合日志+ @Nullable注解 + JUnit5整合)
Spring5系列学习文章分享---第六篇(框架新功能系列+整合日志+ @Nullable注解 + JUnit5整合)
32 0
|
运维 监控 UED
阿里云EMAS远程日志发布新功能(支持移动端设备主动上报日志)
使用阿里云EMAS远程日志最新推出的主动上报日志服务,由移动端提供主动上报接口,通过代码逻辑控制是否主动上报设备日志,问题出现的同时获取设备日志,极大提升特殊场景的日志获取效率,提升问题排查体验和用户满意度。
655 0
阿里云EMAS远程日志发布新功能(支持移动端设备主动上报日志)
|
新零售 Web App开发 监控
新功能: 阿里云新BGP DDoS高防 - 实时日志分析上线
阿里云新BGP高防与日志服务打通,对外开放访问日志与CC攻击日志。提供近实时的网站具体的日志自动采集存储、并提供基于日志服务的查询分析、报表报警、下游计算对接与投递的能力。
2986 37
|
SQL 监控 关系型数据库
新功能:阿里云RDS SQL执行日志 - 实时分析监控上线
阿里云关系数据库RDS(MySQL版本)的SQL执行日志已经与日志服务打通,提供实时的SQL执行分析功能,并提供内置可深钻的报表、支持自定义审计规则、异常报警、报表订阅与生态对接能力等。
7347 0
|
分布式计算 监控 Shell
新功能:日志服务IPython/Jupyter Notebook扩展发布
日志服务发布IPython/Jupyter Notebook扩展,可以轻松地使用Python对海量数据进行深度加工(ETL)、交互式分析(通过SQL、DataFrame)、机器学习与可视化等。
4081 0
|
运维 监控 大数据
阿里云CDN实时日志服务正式发布 数据驱动 实时决策
12月26日,阿里云CDN实时日志服务举办线上直播发布会,全网首次深度解读阿里云CDN大数据系统技术演进,产品应用场景与业务实操。阿里云CDN实时日志服务可以将CDN采集的实时日志,在小于60秒的时间进行实时、交互式分析和报表呈现,为监控、报警、渠道分析、运营分析提供实时、可靠的数据参考。
3059 0
|
数据采集 监控 容器
【功能发布】日志服务Logtail 2018-08
【功能发布】日志服务Logtail 2018-08
2330 0
|
SQL 机器学习/深度学习 监控
阿里云日志服务(SLS)SQL案例中心发布
阿里云日志服务(SLS)提供大规模日志实时查询与分析能力(LogSearch/Analytics),支持完整SQL92标准(提供restful 和 jdbc两种协议),除基本聚合功能外,支持完整的SQL计算,并支持外部数据源联合查询(Join)、机器学习、模式分析等函数。
2994 0
|
监控
日志服务(SLS)数据加工功能发布
日志服务用户,您好! 针对日志生命周期内存在的各种数据规整、分发、富化、清洗场景需求,阿里云日志服务(SLS)新推出了“数据加工”功能。 推荐在日志服务上进行数据规整、加工或联合其它数据源做分析的数据工程师使用。
7213 0

相关产品

  • 日志服务