开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC 里3.0的pipelineComposer的这两个是做了什么?

Flink CDC 里3.0的pipelineComposer的这两个是做了什么,schema变更不是source做的吗,加分区不是sink做的吗?7c36b9fea2c05966b0478f7a68907a5a.png

展开
收起
小小鹿鹿鹿 2024-03-11 17:08:02 57 0
1 条回答
写回答
取消 提交回答
  • SchemaOperatorTranslator这个是处理schema变更的event 当数据的类型是SchemaChangeEvent时 要暂停数据流 刷新数据入库 执行schema变更的语句等都是在 SchemaOperatorTranslator这里发请求的
    PartitioningTranslator这个是用来均衡数据的 如果不用这个 你直接用reblance hash分区也可以的哦.6002d8efd866aafef9c1a0558f0a4e93.png此回答来自钉群Flink CDC 社区 。

    2024-03-11 21:57:12
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载