日志服务SLS 助力识货 APP,解决业务数据采集查询监控问题

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 日志服务SLS 助力识货 APP,解决业务数据采集查询监控问题

更多存储标杆案例
欢迎点击下方链接查看

阿里云存储标杆案例样板间

公司介绍
识货APP是虎扑体育旗下的导购应用,致力于为广大年轻用户提供专业的网购决策指导,为年轻人带来最及时最劲爆的运动、潮流、生活、时尚等网购资讯。同时识货运动装备的专业鉴定审核机制,也在行业内树立了良好的口碑。

image.png

业务介绍
识货是一家专门做运动潮流购物平台,成立初期主要为用户提供折扣、正品运动鞋商品导购,对于市场上热门的运动鞋都会进行评测,把真实的运动鞋体验传递给爱好者。而后逐步衍生出包括生活电器、服装、食品、家居等全品类优惠信息导购。2014年识货上线海淘频道,把海外主流商城的优质廉价商品也开始推荐给网购用户。
基于这样的业务场景,识货需要对接大量的平台数据,并对这些平台数据进行统一的加工富化,最终接入到实际业务平台中进行分析和决策。

如何解决数据收治与流量洪峰的问题

  1. 对接多平台数据,数据格式不统一,规整难度大

识货对接了包括天猫,京东等在内的海内外主流的平台,通过对数据进行分析和决策后,将物美价廉的商品推荐给用户,但是各平台数据的格式不统一,带来了处理上的困难。

  1. 数据分析需求方涵盖产品研发运维运营财务等,需提供界面化图表能力

识货除需要对平台商品数据进行分析外,还需要对接应用系统、后台服务器、k8s的日志数据,以及账单费用日志等。数据分析需求方涵盖产品研发运维运营财务,需提供更加界面化易用的报表能力满足各方诉求。

  1. 电商活动带来流量洪峰,突增流量场景下如何应对

识货平台的电商属性,在双十一等电商活动日或者运营品牌活动时,均会带来流量的洪峰。因此识货便需要有一款高弹性的日志平台来帮助平台在流量波峰波谷期实现资源的快速扩容和缩容。

日志服务产品为帮助识货解决业务数据采集查询监控问题
针对识货业务对于数据规整加工,多维度数据分析,多可视化平台能力,弹性能力方面的诉求,阿里云提供了日志服务产品作为方案帮助客户解决业务数据采集查询监控问题。

在数据规整加工方面,日志服务提供可托管、高可用、可扩展的数据加工服务,广泛适用于数据的规整、富化、分发、汇总、重建索引等场景。具备全托管、免运维,开箱即用的特性,提供DSL编排能力,内置200+函数,内置算子,能够快速实现二次开发。帮助识货对于多平台的商品数,以及对于不同业务模块,包括社区业务,鉴定业务,基础服务等模块数据进行统一加工富化处理,进而实现业务价值。

image.png

在数据可视化方面,日志服务提供实时数据分析大盘,可以将常用的查询分析语句以图表形式展示,并将统计图表保存到仪表盘中。同时分析大盘支持Restful API 、 JDBC协议,页面可嵌入任何业务系统,除Dashboard外,与DataV、QuickBI、Grafana、Zipkin、Jeager等生态打通,实现更灵活的数据展示。帮助识货的不同团队,根据其具体的业务诉求创建相匹配简单直观的数据图表。

image.png

在弹性能力方面,日志服务可根据流量弹性伸缩,可以很好地适应识货平台由于促销活动带来突发流量,根据实际业务需求对服务进行扩缩容,帮助客户免除突发流量带来的顾虑,能够更加专注于业务本身。

达到的效果
通过日志服务能力,识货平台实现了多数据渠道的高效规整统一,满足了不同业务部门对于数据分析的不同维度诉求。帮助识货平台真正做到了数据驱动业务发展。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
23天前
|
监控 关系型数据库 MySQL
《MySQL 简易速速上手小册》第7章:MySQL监控和日志分析(2024 最新版)
《MySQL 简易速速上手小册》第7章:MySQL监控和日志分析(2024 最新版)
41 3
|
12天前
|
存储 监控 数据可视化
无需重新学习,使用 Kibana 查询/可视化 SLS 数据
本文演示了使用 Kibana 连接 SLS ES 兼容接口进行查询和分析的方法。
|
5天前
|
存储 运维 监控
【Docker专栏】Docker日志管理与监控的最佳方法
【5月更文挑战第7天】本文探讨了Docker容器的日志管理与监控,强调其在运维中的重要性。Docker默认使用`json-file`日志驱动,可通过`docker logs`命令查看。建议选择合适日志驱动,配置日志选项,并集成ELK Stack等工具进行高级分析。实时监控、设置警报、分析数据和审计日志是实践关键。最佳实践包括日志数据与容器数据分离、使用日志代理、保护敏感信息及遵守法规。关注新技术以提升系统稳定性和安全性。
【Docker专栏】Docker日志管理与监控的最佳方法
|
6天前
|
存储 监控 Apache
查询提速11倍、资源节省70%,阿里云数据库内核版 Apache Doris 在网易日志和时序场景的实践
网易的灵犀办公和云信利用 Apache Doris 改进了大规模日志和时序数据处理,取代了 Elasticsearch 和 InfluxDB。Doris 实现了更低的服务器资源消耗和更高的查询性能,相比 Elasticsearch,查询速度提升至少 11 倍,存储资源节省达 70%。Doris 的列式存储、高压缩比和倒排索引等功能,优化了日志和时序数据的存储与分析,降低了存储成本并提高了查询效率。在灵犀办公和云信的实际应用中,Doris 显示出显著的性能优势,成功应对了数据增长带来的挑战。
查询提速11倍、资源节省70%,阿里云数据库内核版 Apache Doris 在网易日志和时序场景的实践
|
6天前
|
监控 安全 数据可视化
中间件应用日志记录和监控
中间件应用日志记录和监控
20 3
|
12天前
|
Prometheus 监控 Cloud Native
【Go语言专栏】Go语言中的日志记录与监控
【4月更文挑战第30天】Go语言在软件开发和运维中扮演重要角色,提供灵活的日志记录机制和与多种监控工具的集成。内置`log`包支持基本日志记录,而第三方库如`zap`、`zerolog`和`logrus`则扩展了更多功能。监控方面,Go应用可与Prometheus、Grafana、Jaeger等工具配合,实现系统指标收集、可视化和分布式追踪。健康检查通过HTTP端点确保服务可用性。结合日志和监控,能有效提升Go应用的稳定性和性能。
|
12天前
|
存储 监控 关系型数据库
PHP编写的电脑监控软件:用户登录日志记录与分析
使用PHP编写简单但功能强大的电脑监控软件,记录用户登录日志并进行分析。代码示例展示了如何获取并存储用户IP地址和登录时间到数据库,然后进行登录数据的分析,如计算登录频率和常见登录时间。此外,还介绍了如何通过定时任务自动将监控数据提交到网站,以便实时监控用户活动,提升系统安全性和稳定性。
38 0
|
12天前
|
Prometheus 监控 Kubernetes
Kubernetes 集群的监控与日志管理策略
【4月更文挑战第30天】 在微服务架构日益普及的当下,容器化技术与编排工具如Kubernetes成为了运维领域的重要话题。有效的监控和日志管理对于保障系统的高可用性和故障快速定位至关重要。本文将探讨在Kubernetes环境中实施监控和日志管理的最佳实践,包括选用合适的工具、部署策略以及如何整合这些工具来提供端到端的可见性。我们将重点讨论Prometheus监控解决方案和EFK(Elasticsearch, Fluentd, Kibana)日志管理堆栈,分析其在Kubernetes集群中的应用,并给出优化建议。
|
13天前
|
SQL 调度 Swift
【一文看懂】Havenask日志查询
本次分享内容为Havenask的日志查询,文章包含了具体查询步骤和举例、实操演示,希望可以帮助大家更好的使用Havenask。
88 0
|
23天前
|
SQL 存储 监控
SLS 查询新范式:使用 SPL 对日志进行交互式探索
像 Unix 命令一样支持多级管道级联,像加工预览一样实时处理查询结果,更便捷的交互,更丰富的算子,更灵活的探索半结构化日志,快来试试使用 SPL 语言查询日志数据吧~
46304 4

相关产品

  • 日志服务