Flink CDC如果这些我都不做配置,也不加窗口,然后ck设置成5分钟,那source数据过来flink处理完后并不会立即写出去,没办法秒级的写入,我可以这么理解吗?
你的理解是正确的。如果Flink CDC的下游连接器没有做任何特殊的配置,并且也没有设置窗口操作,只是简单地将CK(Checkpoint)设置为5分钟,那么在source的数据过来并经过Flink处理完后,确实不会立即写出到外部存储。这是因为Flink的Checkpoint机制会周期性地对应用的状态进行快照处理,包括算子状态和键值分区状态。
Checkpoint的主要功能是用于容错恢复,即当作业发生故障后,Flink可以将所有任务的状态恢复到最后一次Checkpoint中的状态,并从那里重新开始执行。然而,这种机制并不直接涉及到数据的实际写入行为。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。