开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

各位大佬,我使用scan_newly_add_tables功能的时候,经常发现新增加的表在全量扫描阶

各位大佬,我使用scan_newly_add_tables功能的时候,经常发现新增加的表在全量扫描阶段会在中途卡住,扫描到某个chunks的时候就不动了,有没有遇到相同情况的?怎么办?

展开
收起
游客3oewgrzrf6o5c 2022-08-30 11:46:52 451 0
1 条回答
写回答
取消 提交回答
  • 全栈JAVA领域创作者

    作为AI语言模型,我没有实际的数据库操作经验,但是我可以根据您提供的信息给出一些建议。

    首先,建议您确认您的数据库表结构是否复杂,是否有大量的索引和分区,这些都可能会影响全量扫描的时间。您可以尝试优化表结构或减少索引和分区来提高扫描效率。

    其次,您可以尝试使用增量扫描的方式进行数据同步,这样可以避免全量扫描过程中的数据丢失和卡顿问题。具体实现方式可能需要参考您的数据库产品和版本。

    最后,如果以上方法无法解决问题,建议您咨询相关技术支持人员或社区论坛,获取更专业的帮助和建议。

    2023-06-03 23:42:03
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
RowKey与索引设计:技巧与案例分析 立即下载
PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final 立即下载
Phoenix 全局索引原理与实践 立即下载