能问下flinkcdc 用的依赖是那个吗?带SQL的还是不带SQL的

能问下flinkcdc 用的依赖是那个吗?带SQL的还是不带SQL的

展开
收起
游客3oewgrzrf6o5c 2022-08-22 10:05:31 386 分享 版权
阿里云 AI 助理回答

在使用Flink CDC时,选择依赖应根据您的应用场景是使用SQL作业还是DataStream作业来决定:

  1. 对于SQL作业

    • 您应该使用flink-sql-connector-xxx这类依赖。这些是FAT JAR包,包含了连接器代码及所有必要的第三方依赖,适用于通过Flink SQL接口接入数据源或数据sink。例如,如果您需要连接到MySQL数据库并使用CDC功能,您会用到flink-sql-connector-mysql-cdc这样的依赖。
  2. 对于DataStream作业

    • 应该使用flink-connector-xxx这类依赖。这些依赖只包含连接器的核心代码,不包括第三方库,因此在编写DataStream API程序时,您需要自行管理这些依赖,并处理可能的冲突问题。

请确保根据您的实际需求选择正确的依赖版本,并注意Flink CDC项目从2.0.0版本开始,group id已从com.alibaba.ververica更改为com.ververica,这会影响到您在Maven中查找和引用依赖的路径。

综上所述,如果您的任务涉及Flink SQL查询,推荐使用带flink-sql-connector的依赖;如果是直接操作DataStream API进行编程,则应选择flink-connector系列的依赖。

有帮助
无帮助
AI 助理回答生成答案可能存在不准确,仅供参考
0 条回答
写回答
取消 提交回答

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
还有其他疑问?
咨询AI助理