实时计算 Flink版产品使用问题之如何读取oracle中的blob类型的数据

简介: 实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。

问题一:flink cdc 能对pgsql做增量数据抽取吗?有参考指导一下吗?

flink cdc 能对pgsql做增量数据抽取吗?有参考指导一下吗?



参考答案:

支持,使用Incremental Snapshot的 latest-offset 。参考:

https://apache.github.io/flink-cdc/master/content/connectors/postgres-cdc.html



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/602743



问题二:Flink SQL能写delete语句吗?

Flink SQL能写delete语句吗?通过Kafka的数据关联删除JDBC的数据



参考答案:

当然可以写。需要在flink中配置MYSQL连接,然后就就正常写sql语句就可以了。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/602742



问题三:使用flink CDC的flinksql可以不传输delete的数据吗?

使用flink CDC的flinksql可以不传输delete的数据吗?或通过 WITH ('connector' 实现 ,或通过flink的配置文件,能实现吗?



参考答案:

sql连接器是支持的,如上官网去找sql的连接器。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/602739



问题四:怎么使用flinkcdc读取oracle中的blob类型的数据?

怎么使用flinkcdc读取oracle中的blob类型的数据?在sql-client 中select * from source端; blob为null



参考答案:

可以看下这个:

https://debezium.io/documentation/reference/1.9/connectors/oracle.html#oracle-property-lob-enabled



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/602735



问题五:Flink CDC 里这是什么情况?

Flink CDC 里这是什么情况?



参考答案:

flink-cdc-common-3.0.1.jar 这个包加进去试一下。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/602728

相关实践学习
基于Hologres+Flink搭建GitHub实时数据大屏
通过使用Flink、Hologres构建实时数仓,并通过Hologres对接BI分析工具(以DataV为例),实现海量数据实时分析.
实时计算 Flink 实战课程
如何使用实时计算 Flink 搞定数据处理难题?实时计算 Flink 极客训练营产品、技术专家齐上阵,从开源 Flink功能介绍到实时计算 Flink 优势详解,现场实操,5天即可上手! 欢迎开通实时计算 Flink 版: https://cn.aliyun.com/product/bigdata/sc Flink Forward Asia 介绍: Flink Forward 是由 Apache 官方授权,Apache Flink Community China 支持的会议,通过参会不仅可以了解到 Flink 社区的最新动态和发展计划,还可以了解到国内外一线大厂围绕 Flink 生态的生产实践经验,是 Flink 开发者和使用者不可错过的盛会。 去年经过品牌升级后的 Flink Forward Asia 吸引了超过2000人线下参与,一举成为国内最大的 Apache 顶级项目会议。结合2020年的特殊情况,Flink Forward Asia 2020 将在12月26日以线上峰会的形式与大家见面。
相关文章
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
简介:本文整理自阿里云高级技术专家李麟在Flink Forward Asia 2025新加坡站的分享,介绍了Flink 2.1 SQL在实时数据处理与AI融合方面的关键进展,包括AI函数集成、Join优化及未来发展方向,助力构建高效实时AI管道。
1340 43
|
SQL 人工智能 JSON
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
本文整理自阿里云的高级技术专家、Apache Flink PMC 成员李麟老师在 Flink Forward Asia 2025 新加坡[1]站 —— 实时 AI 专场中的分享。将带来关于 Flink 2.1 版本中 SQL 在实时数据处理和 AI 方面进展的话题。
681 0
Flink 2.1 SQL:解锁实时数据与AI集成,实现可扩展流处理
|
SQL 关系型数据库 Apache
从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
本文将深入解析 Flink-Doris-Connector 三大典型场景中的设计与实现,并结合 Flink CDC 详细介绍了整库同步的解决方案,助力构建更加高效、稳定的实时数据处理体系。
4000 0
从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
|
SQL 存储 运维
如何降低 Flink 开发和运维成本?阿里云实时计算平台建设实践
本次分享主要介绍阿里云实时计算平台从 2.0 基于 Yarn 的架构到 3.0 云原生时代的演进,以及在 3.0 平台上一些核心功能的建设实践,如健康分,智能诊断,细粒度资源,作业探查以及企业级安全的建设等。
如何降低 Flink 开发和运维成本?阿里云实时计算平台建设实践
|
SQL 存储 分布式计算
汽车之家基于 Flink 的实时计算平台 3.0 建设实践
汽车之家实时计算平台负责人邸星星在 FFA 2021 的分享
汽车之家基于 Flink 的实时计算平台 3.0 建设实践
|
存储 SQL 分布式计算
《Apache Flink 案例集(2022版)》——2.数据分析——汽车之家-Flink 的实时计算平台 3.0 建设实践
《Apache Flink 案例集(2022版)》——2.数据分析——汽车之家-Flink 的实时计算平台 3.0 建设实践
500 0
|
存储 数据挖掘 Apache
《Apache Flink 案例集(2022版)》——2.数据分析——汽车之家-Flink 的实时计算平台 3.0 建设实践(2)
《Apache Flink 案例集(2022版)》——2.数据分析——汽车之家-Flink 的实时计算平台 3.0 建设实践(2)
551 0
|
消息中间件 存储 SQL
《Apache Flink 案例集(2022版)》——5.数字化转型——联通-联通实时计算平台演进与实践
《Apache Flink 案例集(2022版)》——5.数字化转型——联通-联通实时计算平台演进与实践
490 0
|
SQL 消息中间件 存储
作业帮基于 Flink 的实时计算平台实践
Flink Forward Asia 2021,作业帮实时计算负责人张迎的分享
作业帮基于 Flink 的实时计算平台实践

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多