问题一:Flink这个默认的ck保存天数和保存个数是多少个?
Flink这个默认的ck保存天数和保存个数是多少个?
参考答案:
这是SP哈,CK是系统检查点,SP是作业快照。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/589611
问题二:Flink不设置这个默认多少条?
Flink不设置这个默认多少条?
参考答案:
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/589610
问题三:Flink引入或不引入 datahub ,有什么区别和优势?
Flink引入或不引入 datahub ,有什么区别和优势?
参考答案:
这要看贵公司选 datahub 在业务上来做什么事情了、是否有必要。对 Flink 而言是可以读写 datahub 的。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/589608
问题四:flink这两个搭配加入了 datahub 组件更具哪些优势?
flink+datahub+hologres 和 flink + hologres 加入了 datahub 组件更具哪些优势?就是我们公司做数仓,大数据架构准备使用 flink+datahub+hologres 这几个组件。
参考答案:
如果是数仓的话,Hologres 支持 binlog 感觉直接 Flink+Hologres 就可以搞定了
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/589607
问题五:Flink整库同步过来的表不能开窗吗?
Flink窗口不支持撤回流,而cdc源表是含有撤回的流, cdc源表类型不支持开窗,更换为其他的源表类型即可 整库同步过来的表不能开窗吗?
参考答案:
Flink的CDC(Change Data Capture)源表主要用于捕获数据库中的数据变化,并生成变更事件。这些变更事件可以用于多种场景,如数据同步、数据备份等。
关于您提到的“不支持开窗”,这可能是由于CDC源表的设计和实现决定的。CDC源表主要是为了捕获数据的变化,而不是为了进行复杂的分析或计算。因此,它们可能没有提供与Flink窗口函数相关的功能。
如果您的需求是进行窗口分析,并且需要使用Flink的窗口函数,那么可能需要考虑使用其他类型的源表,如Kafka或其他支持窗口功能的表。
另外,如果您正在进行整库同步,并且需要将数据同步到DataHub或其他存储系统,那么您可能需要考虑使用专门的同步工具或服务,而不是依赖Flink的CDC功能。这些工具通常会提供更全面的数据同步功能,包括对复杂数据转换和处理的支持。
总之,根据您的需求和场景,选择适合的源表类型和同步工具是实现整库同步的关键。
关于本问题的更多回答可点击进行查看: