备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC在业务系统中运行时动态创建一个flinkjob提交到flink集群，有实现过吗？

Flink CDC在业务系统中运行时动态创建一个flinkjob提交到flink集群，有大神实现过吗？我只是想在业务系统中屏蔽一些同步操作的复杂度，能够让写业务的同学专心写业务就好了，同步操作通过注解的方式，动态创建job，自动运行

展开
收起
cuicuicuic 2023-10-31 17:23:19 24 0
1 条回答
写回答
取消 提交回答
  • xin在这

    你这是提交任务平台化，dinky 和 streampark 能实现后半部分，此回答整理自钉群“Flink CDC 社区”

    2023-11-01 08:14:12
    赞同 展开评论 打赏
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版cdc集群 实时计算 Flink版集群 实时计算 Flink版运行 实时计算 Flink版cdc系统 实时计算 Flink版系统
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关产品：
实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
实时计算 Flink版
Flink找不到javassist动态创建的类一般是啥原因？
76
14
0
oracle库，Flink CDC 版本1.17.0，本地运行时，未设置并行度为1时，有谁遇到过？
44
1
0
Flink CDC 里有多个系统，各个系统都有多张表要做实时同步，一般生产上大家怎么来做这个同步啊？
23
1
0
现实情况是原业务系统使用了分区表， 我能忽略他的分区 Flink CDC读取吗？
41
1
0
Flink CDC里这个参数直接放在conf文件吗？1.17之前的还是直接运行时配参吗？
27
1
0
Flink CDC 系统环境：全量抽取没问题，增量和删除报错？
44
1
0
机器学习PAI引用akdl三方库的flink-ml-framework,请问该库是否支持微软系统？
52
1
0
Flink运行一个任务，本地连接远程数据库进行运行时没有问题的，但是部署到服务器后，报错，为什么？
67
1
0
Flink CK和SP不设置自动清理的话，系统会怎样处理，一直堆积下去吗？
27
3
0
flink的taskmanager被系统杀掉的情况大家有碰到过吗？
89
1
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

  • 实时计算 Flink版
    文档详情 产品详情

    • 热门讨论

    热门文章

  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
    1637
  • flink1.15启动后无法访问webui的问题有人遇到过吗
    9686
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
    641
  • Caused by: org.apache.kafka.common.errors.TimeoutE
    2150
  • Flink CDC有遇见这个问题的吗？
    371
  • Flink CDC中The MySQL server has a 兄弟们这个错误咋搞啊？
    404
  • Flink 语句有啥方法不写字段能直接拥有源表的所有字段？
    714
  • flink都是100%占用，请问是什么情况呢？
    404
  • Alink是什么意思？
    1856
  • flink任务报错: Job leader for job id 是啥原因导致的呢?
    815
    • 展开全部
  • 年度回顾 | 2019 年的 Apache Flink（文末有福利）
    4197
  • Apache Flink 零基础入门（一）：基础概念解析
    9735
  • 阿里云实时计算Flink的产品化思考与实践【下】
    110992
  • Flink DataStream API 批处理能力演进之路
    148
  • Flink CDC 3.0 正式发布，详细解读新一代实时数据集成框架
    100451
  • 阿里巴巴瓴羊基于 Flink 实时计算的优化和实践
    245
  • 十大行业经典案例！Apache Flink 的 40 个最佳实践
    13576
  • 友盟+｜如何通过阿里云Flink+Paimon实现流式湖仓落地方案
    315
  • 福利「Flink Forward Asia 2023 」视频合集！
    4110
  • Flink CDC 系列 - 实时抽取 Oracle 数据，排雷和调优实践
    8095
    • 展开全部

    相关课程

    更多
  • 大数据Flink实时旅游平台环境篇 2020版
    582
    29
    去学习
  • Apache Flink 入门到实战 - Flink开源社区出品
    1392
    16
    去学习
  • 实时计算 Flink 版产品入门与实操
    3806
    10
    去学习
  • 开源 Flink 极速上手教程
    1752
    7
    去学习
  • 大数据实时计算框架Spark快速入门
    778
    93
    去学习
  • Apache Flink 入门
    4826
    9
    去学习

    • 相关文章

  • 流计算引擎数据正确性的挑战
  • 大数据组件之Storm简介
  • InfluxDB的连续查询与数据聚合技术详解
  • 11缓存·
  • 22缓存

    • 相关电子书

    更多
    • Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关实验场景

    更多
  • 使用PolarDB-X与Flink搭建实时数据大屏
    185
    1.0小时
    去实验
  • 使用Flink实时发现最热Github项目
    843
    1.0小时
    去实验
  • 5分钟上手Flink MySQL连接器
    227
    1.0小时
    去实验
  • 基于Flink+Tair搭建实时监控大屏
    38
    1.0小时
    去实验
  • 基于Hologres+Flink搭建GitHub实时数据大屏
    26
    1.0小时
    去实验