1秒10亿数据!阿里云日志服务再次升级

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

日前,在“2017杭州·云栖大会”上阿里云宣布,日志服务与Splunk打通合作,同时面向亿级实时日志分析功能上线。兼容SQL92标准与JDBC协议,集中解决各类环境日志一站式需求,包括采集、存储、投递与查询分析等,将日志分析提升到全新高度,达到国内领先水平。

日常生活中人和物的活动会产生大量的数据,而日志是一种常用记录这类活动的载体。通过日志处理,分析可以帮助我们通过大数据找到背后的运作规律,做到业务的智能运维和运营。日志分析最终是拿到结果,但过程中往往需要通过软件(例如kafka、ELK、Flume)等组合搭建日志处理系统,这给使用日志分析工作带来很多问题和困扰。而阿里云日志服务是一种无托管的方案,无需用户关心琐碎的数据采集、扩容、维护、错误处理等工作,将精力集中投入在“分析”结果上。

在国外云厂商方案中,一般需要通过几个产品连接+组合才能搭建日志处理方案。就如要开一辆车,得购买几个组件,在一些连接点上还需要写一些处理程序才能运行起来,在使用过程中需要到不同产品中关注水位,以确保服务可用性。阿里云日志服务提供的是完整的解决方案,整体易用性更佳。

据了解,阿里云日志服务商业化一年内大约推出30+新功能,同时也将日志分析提升到新的高度,具备以下几个特点:

  1. 快:传统方案从数据产生到拿到结果往往最快需要接近分钟。今天日志服务下的LogAnalytics功能够在1秒内,完成数据采集 + 存储 + 10亿查询 + 1亿计算所有功能,这就意味着日志分析实时性达到前所未有速度。
  2. 强:传统方案一般只支持有限的查询+聚合分析。但LogAnaltyics完整支持SQL 92语法,可以像分析报表数据一样分析你的日志。
  3. 广:除了与Docker、Storm、Spark Streaming、Hadoop、Hive、Presto + 阿里云大数据对接外,还支持了Grafana等著名开源数据可视化插件,方便与上层业务系统集成。
  4. 省:费用接近自建10%,就是这么任性。具体情况可以参见自建费用对比,https://help.aliyun.com/document_detail/59070.html

阿里云日志服务负责人介绍,目前主要有三个功能:LogHub,LogShipper,LogAnalytics。其中LogHub使用成本与其他方案相比,能节省60%以上时间和费用,极大节省了日志系统的投入。而目前阿里云提供的LogShipper功能也可以免费使用,能为用户提供海量、高并发、高性价比的日志处理系统。如果采集公网上用户一天10 GB压缩后的数据,如果通过自建方案需要16元/天,而使用LogHub 只需要2元,大约为前者10%,且不需要任何运维上的投入。LogAnalytics在同样规模,性能条件下,价格是自建方案10%。例如一天写入50GB数据(其中27GB 为实际的内容),保存90天,平均一个月的耗费对比如下图:image

同样性能,使用LogSearch/Analytics与ELK(SSD)费用比为 13.6%。

阿里云日志产品使用起来也非常简单,主要分为两个步骤:一是接入日志数据;二是在控制台配置并进行分析。之后无论是对接实时计算,还是数仓,或仪表盘还是报警都非常方便。
image

据了解,该产品适合对日志处理、分析有需求的用户场景。例如电子商务,媒体直播,游戏,广告,IoT和App开发用户。这些场景上都有大量用户、设备产生的数据需要进行实时分析。而使用阿里云日志产品,则能更快更省更好地处理分析。

想了解更多阿里云日志产品,欢迎点击www.aliyun.com/product/sls。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
1月前
|
缓存 NoSQL Linux
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
|
22天前
|
SQL 人工智能 运维
在阿里云日志服务轻松落地您的AI模型服务——让您的数据更容易产生洞见和实现价值
您有大量的数据,数据的存储和管理消耗您大量的成本,您知道这些数据隐藏着巨大的价值,但是您总觉得还没有把数据的价值变现出来,对吗?来吧,我们用一系列的案例帮您轻松落地AI模型服务,实现数据价值的变现......
108 3
|
27天前
|
数据库 Java 监控
Struts 2 日志管理化身神秘魔法师,洞察应用运行乾坤,演绎奇幻篇章!
【8月更文挑战第31天】在软件开发中,了解应用运行状况至关重要。日志管理作为 Struts 2 应用的关键组件,记录着每个动作和决策,如同监控摄像头,帮助我们迅速定位问题、分析性能和使用情况,为优化提供依据。Struts 2 支持多种日志框架(如 Log4j、Logback),便于配置日志级别、格式和输出位置。通过在 Action 类中添加日志记录,我们能在开发过程中获取详细信息,及时发现并解决问题。合理配置日志不仅有助于调试,还能分析用户行为,提升应用性能和稳定性。
37 0
|
27天前
|
开发者 前端开发 编解码
Vaadin解锁移动适配新境界:一招制胜,让你的应用征服所有屏幕!
【8月更文挑战第31天】在移动互联网时代,跨平台应用开发备受青睐。作为一款基于Java的Web应用框架,Vaadin凭借其组件化设计和强大的服务器端渲染能力,助力开发者轻松构建多设备适应的Web应用。本文探讨Vaadin与移动设备的适配策略,包括响应式布局、CSS媒体查询、TouchKit插件及服务器端优化,帮助开发者打造美观且实用的移动端体验。通过这些工具和策略的应用,可有效应对屏幕尺寸、分辨率及操作系统的多样性挑战,满足广大移动用户的使用需求。
31 0
|
27天前
|
存储 运维 监控
Entity Framework Core 实现审计日志记录超棒!多种方法助你跟踪数据变化、监控操作,超实用!
【8月更文挑战第31天】在软件开发中,审计日志记录对于跟踪数据变化、监控用户操作及故障排查至关重要。Entity Framework Core (EF Core) 作为强大的对象关系映射框架,提供了多种实现审计日志记录的方法。例如,可以使用 EF Core 的拦截器在数据库操作前后执行自定义逻辑,记录操作类型、时间和执行用户等信息。此外,也可通过在实体类中添加审计属性(如 `CreatedBy`、`CreatedDate` 等),并在保存实体时更新这些属性来记录审计信息。这两种方法都能有效帮助我们追踪数据变更并满足合规性和安全性需求。
22 0
|
1月前
|
SQL 监控 Oracle
Oracle数据误删不用怕,跟我来学日志挖掘
Oracle数据误删不用怕,跟我来学日志挖掘
23 0
|
1月前
|
Kubernetes Ubuntu Windows
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
【Azure K8S | AKS】分享从AKS集群的Node中查看日志的方法(/var/log)
|
15天前
|
Java
日志框架log4j打印异常堆栈信息携带traceId,方便接口异常排查
日常项目运行日志,异常栈打印是不带traceId,导致排查问题查找异常栈很麻烦。
|
25天前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
57 9
|
1月前
|
开发框架 .NET Docker
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题
【Azure 应用服务】App Service .NET Core项目在Program.cs中自定义添加的logger.LogInformation,部署到App Service上后日志不显示Log Stream中的问题

相关产品

  • 日志服务