1626943909296010_个人页

2024年05月

• 03.01 17:14:06
  发表了文章 2024-03-01 17:14:06

  Storm

  作者王刚和刘首维在2019年前使用Storm处理阿里巴巴之家的实时业务，但随着需求增加和数据规模扩大，Storm的开发与维护成本上升。他们面临SQL翻译和过度依赖外部存储（如Redis）的问题。为解决这些问题，团队在2019年初开始转向Flink引擎，Flink的SQL支持和内置状态管理吸引他们。新平台以Flink SQL为基础，服务于多个部门，支持5000亿条日计算量，涵盖实时数仓、推荐、日志分析等场景，最高QPS达200万。平台优势在于低成本开发、高性能、低维护和数据资产管理。架构包含表管理、任务配置、权限管理、UDF管理等，并计划与仓库和业务方合作，丰富功能，迁移至K8s，以及引入Flink 1.9版本。Flink Forward Asia 2019活动将深入讨论大数据技术与开源生态。

2024年04月

• 04.15 15:07:08
  回答了问题 2024-04-15 15:07:08

  2023年你觉得，云技术会有哪些新的突破

  赞1 踩0 评论0