【云栖号案例 | 互联网】车主无忧通过消息队列Kafka商业版 解放生产力 节省大量成本

简介: 车主无忧开源的Kafka多副本存储,存储压力大,处理冷数据读的时候处理速度明显下降。上云后消息集群平稳运行,提升诊断效率、指导优化系统。

云栖号案例库:【点击查看更多上云案例】
不知道怎么上云?看云栖号案例库,了解不同行业不同发展阶段的上云方案,助力你上云决策!

公司介绍

车主无忧是属于广州小迈网络科技公司服务于汽车后市场的重要产品。小迈网络是一家以1、2线城市车主为目标用户的移动互联网公司,通过构建串联车主与商家的O2O平台,降低车主用车成本,提升车主用车品质。于2015.1成立,由纳斯达克上市公司前高管创建,并获得多轮风投的青睐。公司拥有一流的移动互联网产品研发核心团队,团队年轻有活力,拥有多年移动互联网产品研发运营经验,在过去的工作中领导和创建了超过4亿用户规模的移动互联网产品。

车主无忧提供了违章查询、罚单处理、二手车、加油充值、车险服务,以及各种咨询头条服务,致力于打造汽车服务的生态圈子。目前车主用户已破亿,在艾瑞咨询APP热点指数“汽车护理”领域排名第一。

业务痛点

  • 容量弹性:

开源的Kafka在partition分区规模超过1000后有明显的抖动,集群扩容小时级别,业务有感知。

  • 存储开销:

开源的Kafka多副本存储,存储压力大,且会在磁盘写满的情况下直接停止运行,没有保扩机制,需要额外提供告警人工处理。

  • 性能稳定:

在处理冷数据读的时候处理速度明显下降,数据写入有一定失败几率;拉取G级别的数据时,Full GC高频出现。

解决方案

利用经过优化的阿里云商业版消息队列Kafka开箱即用,完全兼容开源的无缝迁移的特性,结合最佳实践《在线迁移消息队列Kafka》 的指导,自主高效地完成了迁移工作。

  • 由阿里云团队进行专业的运维,利用Kafka的自动化内检功能,保证Broker以及依赖组件Zookeeper的健康稳定。
  • 运维白屏化管理,可以协助用户进行快速的分钟级扩容。
  • 提供了有效的故障管理。
  • 借助商业版本提供的监控告警能力,实时掌握硬件资源与服务可用性情况,指导我们的应用进行优化调整。

上云价值

  • 业务稳定:

通过迁移到商业版本的 Kafka,消息无丢失,生产与消费端的抖动明显好转,整个消息集群平稳运行,有效地支持了业务的快速发展。

  • 效率提升:

Kafka提供了白屏化的管理方式, 基于阿里云提供的控制台,我们可以方便快捷地扩展实例,对TOPIC进行管理,以及扩展PARTITION。另外还提供了堆积、 消息查询等实时监控功能,并且可以设定各种资源的报警规则,用于快速定位问题、提升诊断效率、指导优化系统。

  • 成本控制:

节省了大量的运维人力成本,解放了生产力,综合比较,使用商业版本的使用成本更划算。

证言

“商业版的KAFKA完全兼容开源的生态,接入方便容易,并且提供了优质的SLA保障,各种日常功能操作也简洁易用,综合使用成本有优势。总得来说就是省事省钱,质量有保证,是一款良心制作的基础PAAS产品。”——小迈 CTO温嘉铭

相关产品

  • 消息队列 Kafka 版

消息队列 Kafka 版是阿里云基于 Apache Kafka 构建的高吞吐量、高可扩展性的分布式消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等,是大数据生态中不可或缺的产品之一,阿里云提供全托管服务,用户无需部署运维,更专业、更可靠、更安全。
更多关于消息队列 Kafka 版的介绍,参见消息队列 Kafka 版产品详情页

相关最佳实践

您可以参考以下最佳实践完成业务搭建。

在线迁移消息队列 Kafka

本文 Step by Step 介绍了如何选择并使用通用迁移和数据迁移两种方案将阿里云自建 Kafka 集群迁移到消息队列 Kafka。同时本文可以作为线下 IDC 自建Kafka集群等场景迁移到消息队列 Kafka 的参考手册。

【云栖号在线课堂】每天都有产品技术专家分享!
在线课堂地址:https://yqh.aliyun.com/live

立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK

相关文章
|
29天前
|
消息中间件 关系型数据库 MySQL
大数据-117 - Flink DataStream Sink 案例:写出到MySQL、写出到Kafka
大数据-117 - Flink DataStream Sink 案例:写出到MySQL、写出到Kafka
112 0
|
9天前
|
消息中间件 Java Kafka
初识Apache Kafka:搭建你的第一个消息队列系统
【10月更文挑战第24天】在数字化转型的浪潮中,数据成为了企业决策的关键因素之一。而高效的数据处理能力,则成为了企业在竞争中脱颖而出的重要武器。在这个背景下,消息队列作为连接不同系统和服务的桥梁,其重要性日益凸显。Apache Kafka 是一款开源的消息队列系统,以其高吞吐量、可扩展性和持久性等特点受到了广泛欢迎。作为一名技术爱好者,我对 Apache Kafka 产生了浓厚的兴趣,并决定亲手搭建一套属于自己的消息队列系统。
25 2
初识Apache Kafka:搭建你的第一个消息队列系统
|
11天前
|
消息中间件 存储 运维
云消息队列 Kafka 版全面升级:经济、弹性、稳定,成本比自建最多降低 82%
本文介绍了阿里云云消息队列 Kafka 版的全面升级,强调了其在经济性、稳定性和弹性方面的显著提升。同时,与 Apache Kafka 相比,云消息队列 Kafka 版通过节省 66% 的资源,实现了客户使用成本比自建最多降低 82%。
|
15天前
|
消息中间件 存储 运维
曹操出行借助 ApsaraMQ for Kafka Serverless 提升效率,成本节省超 20%
本文整理于 2024 年云栖大会主题演讲《云消息队列 ApsaraMQ Serverless 演进》,杭州优行科技有限公司消息中间件负责人王智洋分享 ApsaraMQ for Kafka Serverless 助力曹操出行实现成本优化和效率提升的实践经验。
|
29天前
|
消息中间件 存储 druid
大数据-156 Apache Druid 案例实战 Scala Kafka 订单统计
大数据-156 Apache Druid 案例实战 Scala Kafka 订单统计
36 3
|
29天前
|
消息中间件 druid 大数据
大数据-153 Apache Druid 案例 从 Kafka 中加载数据并分析(二)
大数据-153 Apache Druid 案例 从 Kafka 中加载数据并分析(二)
29 2
|
29天前
|
消息中间件 分布式计算 druid
大数据-153 Apache Druid 案例 从 Kafka 中加载数据并分析(一)
大数据-153 Apache Druid 案例 从 Kafka 中加载数据并分析(一)
49 1
|
13天前
|
消息中间件 中间件 Kafka
解锁Kafka等消息队列中间件的测试之道
在这个数字化时代,分布式系统和消息队列中间件(如Kafka、RabbitMQ)已成为日常工作的核心组件。本次公开课由前字节跳动资深专家KK老师主讲,深入解析消息队列的基本原理、架构及测试要点,涵盖功能、性能、可靠性、安全性和兼容性测试,并探讨其主要应用场景,如应用解耦、异步处理和限流削峰。课程最后设有互动答疑环节,助你全面掌握消息队列的测试方法。
15 0
|
29天前
|
消息中间件 NoSQL Kafka
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
107 0
|
29天前
|
消息中间件 分布式计算 Kafka
大数据-102 Spark Streaming Kafka ReceiveApproach DirectApproach 附带Producer、DStream代码案例
大数据-102 Spark Streaming Kafka ReceiveApproach DirectApproach 附带Producer、DStream代码案例
54 0

相关产品

  • 云消息队列 Kafka 版