开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC中debezium源码中哪个地方会注册schema registry?

Flink CDC中debezium源码中哪个地方会注册schema registry? 一直没找到

展开
收起
真的很搞笑 2024-03-05 23:48:14 78 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在 Flink CDC 中,Debezium 会在处理 Avro 序列化消息时注册 schema 到 schema registry

    具体来说,当使用 Debezium 作为 Flink CDC 的连接器来捕获变更数据并将其发送到 Kafka 时,如果选择使用 Apache Avro 作为序列化格式,那么在处理这些 Avro 序列化的消息时,Debezium 会自动处理与 schema 相关的操作。这包括将 schema 信息注册到 schema registry 中,以便消费者能够理解消息的结构。这一过程对于用户来说是透明的,通常不需要手动干预。

    此外,schema registry 是 Apache Kafka 的一个组件,用于存储和管理 Avro schemas,确保数据的生产者和消费者能够一致地理解数据结构。

    综上所述,Debezium 在处理 Avro 序列化的消息时会涉及到 schema registry,但具体的注册过程通常是自动完成的,不需要用户直接操作。

    2024-03-08 22:54:17
    赞同 展开评论 打赏
  • Debezium在Flink CDC中并未直接注册Schema Registry,它主要用于捕获MySQL等数据库变更事件并生成JSON格式的消息,而Schema Registry一般与Kafka配合使用来管理序列化/反序列化的Avro schema。如果您希望将Debezium生成的JSON消息与Schema Registry结合使用,通常是在Kafka生产者或消费者端进行Schema的注册和管理。

    2024-03-06 10:27:09
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载