Flink CDC程序都需要打包到flink集群去执行来保证高可用吗?
Flink CDC程序可以打包到Flink集群中执行,也可以在本地机器上运行。但是,为了保证高可用,建议将Flink CDC程序打包到Flink集群中执行,因为这样可以利用Flink的高可用性特性,例如自动重启、故障转移等,从而提高系统的可用性和稳定性。
在Flink CDC中,可以使用Flink的job server来部署和管理Flink作业,从而实现作业的高可用。job server可以自动检测和处理Flink作业的故障,从而保证Flink作业的高可用性。
在Flink CDC程序中,如需要保证程序的高可用性,通常需要将程序打包到Flink集群中去执行。这是因为Flink的作业是运行在集群上的,通过集群的高可用性机制来保证作业的稳定运行。如果将程序部署在单个机器上,一旦机器故障,程序就会停止运行,无法保证高可用性。
另外,将程序打包到Flink集群中还可以方便地进行水平扩展,提高程序的处理能力。通过增加Flink集群中的节点数量,可以将任务分布到更多的机器上,从而提高程序的处理速度和处理能力。
将程序打包到Flink集群中执行并不意味着程序的高可用性就得到了保证。在Flink集群中,也需要通过一系列的措施来保证程序的高可用性,例如使用Flink的故障恢复机制、设置任务的重试策略、使用Zookeeper等高可用性服务等。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。