开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink 现在支持ob了么?

Flink 现在支持ob了么?

展开
收起
三分钟热度的鱼 2023-10-18 20:18:08 84 0
3 条回答
写回答
取消 提交回答
  • Flink目前并不直接支持Oracle Binary Log(OB)。但是,你可以通过使用第三方的CDC工具(如Debezium、Canal等)将OB转换为Flink可以接受的格式(如Avro、JSON等),然后再使用Flink进行处理。

    以下是一种可能的方法:

    1. 使用Debezium或Canal等工具从Oracle数据库的Binary Log捕获变化。

    2. 使用Kafka将捕获的变化数据发布出去。

    3. 使用Flink的Kafka Connector从Kafka中读取数据。

    4. 对读取到的数据进行处理。

    这种方式的优点是可以利用Flink的强大功能(如窗口计算、状态管理等)对数据进行处理,而且可以通过Kafka的分区策略和Flink的并行度来优化性能。

    2023-10-21 17:11:42
    赞同 展开评论 打赏
  • 是的,Flink现在支持Apache ORC(Optimized Row Columnar)格式。Apache ORC是一种列式存储格式,它支持高效的数据压缩和列级别的数据处理,适合存储和处理大规模的数据。

    2023-10-18 22:41:54
    赞同 展开评论 打赏
  • 支持了哈。此回答整理自钉群“实时计算Flink产品交流群”

    2023-10-18 20:27:21
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载