我现在在部署flink上生产。 yarn跟standalone的主要优劣势能分享下吗

转自钉钉群21789141:我现在在部署flink上生产。 yarn跟standalone的主要优劣势能分享下吗

展开
收起
赵慧@ApacheFlink中文社区 2019-01-22 18:47:48 7017 分享 版权
1 条回答
写回答
取消 提交回答
  • 宝牛:生产环境推荐使用Yarn,更稳定。standalone我们也没有在生产跑过,线上都是yarn模式

    问:那在yarn模式下有没有什么需要注意的? yarn模式下tm是不是独立的,不会用多有job能复用同一个tm

    宝牛:tm是独立的,阿里用的Blink版本不同的job不会复用同一个tm。

    瓦力per job模式tm里run的都是同一个job;session模式,可以跑多个不同job; blink与flink相同

    问:per job模式指的是yarn的single job是吗?

    瓦力:session模式保留了Standalone的优势,可以节省申请启动tm的时间,适合短小job共用资源执行;per job有更好的资源quota管理、隔离等,性能稳定性有更好保障

    2019-07-17 23:26:23
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
还有其他疑问?
咨询AI助理