问题一:Flink CDC启动yarn-session这里指定的资源,是指每提交一个任务都会使用这些资源吗?
Flink CDC启动yarn-session这里指定的资源,是指每提交一个任务都会使用这些资源吗?还是一共使用这些资源?
参考回答:
session模式不能用于生产哦,我记得以前是,session集群全部会有这些资源,jm不需要这么大,2-4g就够了
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/571760
问题二:flinkcdc读取oracle的归档日志文件时,有锁文件一说吗?
flinkcdc读取oracle的归档日志文件时,有锁文件一说吗(就是flinkcdc读归档日志的时候,oracle不能写日志进去)?
参考回答:
没啊。都归档了,就是只读日志子
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/571759
问题三:Flink CDC中sqlserver有碰到过cdc在热备情况下,开启失败的情况吗?
Flink CDC中sqlserver有碰到过cdc在热备情况下,开启失败的情况吗?
参考回答:
逻辑删 过滤下delect =1 即可
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/571758
问题四:Flink CDC中Starroks和doris哪个强一点?
Flink CDC中Starroks和doris哪个强一点?
参考回答:
StarRocks 可以满足企业级用户的多种分析需求,包括 OLAP (Online Analytical Processing) 多维分析、定制报表、实时数据分析和 Ad-hoc 数据分析等。
Doris(之前也称为Palo)和StarRocks都是在OLAP(联机分析处理)场景下使用的分布式列存储数据库,它们在某些方面有一些相似之处,但也存在一些区别。以下是它们在OLAP场景下的一些区别:
https://zhuanlan.zhihu.com/p/649248008
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/571757
问题五:Flink CDC数据同步作业开启之后,有没有好的数据对比方案,比较源端和目标端的数据是否一致?
Flink CDC数据同步作业开启之后,有没有好的数据对比方案,比较源端和目标端的数据是否一致(数量一致、内容一致等等)?
参考回答:
这个给一个一样的sql求下昨天的全量数据不就知道了,采样求总数,然后给一个逻辑求下的,如果你们源库有last_update_time字段,就比较这个时间和目标库是否一致即可
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/571755