开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink oracle cdc。before有数据,after没数据。能确定这条数据被删掉了是吧?

Flink oracle cdc。before有数据,after没数据。能确定这条数据被删掉了是吧。有人夜里删掉了2千多万条审计数据,给我整不自信了。除了人为删除,还有别的可能导致这种状况吗?image.png

展开
收起
cuicuicuic 2023-11-07 07:43:45 40 0
3 条回答
写回答
取消 提交回答
  • op=d就是删除操作,此回答整理自钉群“Flink CDC 社区”

    2023-11-08 07:42:37
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    是的,在Flink Oracle CDC中,如果你在before中有数据但在after中没有找到相同的记录,那么可以确认该记录已被删除。
    除了人为删除外,还有其他可能导致这种情况的因素:

    • 数据清理或归档:某些情况下,为了节省存储空间或提高性能,可能会定期清理或归档旧的数据。
    • 数据迁移:如果数据从一个表迁移到另一个表或数据库,也会造成表中的数据消失。
    • 错误或异常:程序错误、系统故障或其他异常情况也可能导致数据丢失。
    2023-11-07 14:49:15
    赞同 展开评论 打赏
  • 如果使用Flink Oracle CDC,并且发现Before有数据,After没有数据,那么这通常意味着数据已经被删除了。因为Oracle的CDC是通过监听闪回日志(Flashback Log)来捕获数据的变更,包括插入、更新和删除操作。如果在闪回日志中记录了数据的变化,但是在后续的查询中却找不到这些数据,那么最有可能的解释就是这些数据已经被删除了。

    除了人为删除之外,还有一些其他的可能导致这种情况的原因,比如数据库的故障或者错误,或者是数据迁移等操作。但是这些情况都比较罕见,而且通常会伴随有其他的一些异常现象。

    2023-11-07 10:31:47
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载