开发者社区 问答 正文

小米是如何在集群中落地阿里云RSS的,并解决了哪些关键问题?

小米是如何在集群中落地阿里云RSS的,并解决了哪些关键问题?

展开
收起
萝卜丝丸子 2024-07-29 15:56:56 96 分享 版权
1 条回答
写回答
取消 提交回答
  • 小米与阿里云EMR团队建立了共创关系,逐步在生产集群中上线RSS。小米主导了磁盘容错的开发,并在多个环节对RSS作业进行了容错处理,如调度端的重试回退到ESS机制,以及ShuffleWriter初始化阶段的自适应Fallback机制。

    2024-07-29 16:21:35
    赞同 3 展开评论
问答地址: