开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC下游都用的什么呀?

Flink CDC下游都用的什么呀?

展开
收起
真的很搞笑 2023-11-06 13:47:33 67 0
1 条回答
写回答
取消 提交回答
  • Flink CDC(Change Data Capture)的主要下游包括以下几种:

    1. Kafka:Flink CDC可以将捕获到的数据直接写入Kafka消息队列,这对于需要将数据发送到其他系统进行处理的应用非常有用。

    2. Pulsar:除了Kafka之外,Flink CDC还可以将捕获到的数据写入Pulsar消息队列。

    3. 数据湖:Flink CDC可以将捕获到的数据写入Hudi和Iceberg等数据湖格式,这对于需要存储大量原始数据的场景非常有用。

    4. 数据仓库:Flink CDC还可以将捕获到的数据写入各种数据仓库,这对于需要进行数据分析和报告的应用非常有用。

    此外,Flink CDC还可以通过Flink SQL原生支持的Changelog机制,使得CDC数据的加工变得非常简单。

    2023-11-10 11:00:40
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载