AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

flink 目前能感知数据表列的变化(含新增列和删除列) 吗？

flink 目前能感知数据表列的变化(含新增列和删除列) 吗？flink cdc 目前能感知数据表列的数据类型的变化(修改表的列类型) 吗？比如：我改了，某一列的数据类型，能不等感知。

展开
收起
wenti 2023-02-14 13:33:33 283 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 665661

    单纯数据变化是可以感知的，没问题。比如flink mysql cdc拿的是mysql binlog，拿到binlog后就看你怎么反序列化了；一般增删字段或者修改字段类型，算作新需求或者迭代需求，需要上游告知你做开发呀，重新兼容新的字段解析，我是这么考虑的——该回答整理自钉群“【③群】Apache Flink China社区”

    2023-02-14 15:48:03
    赞同 展开评论
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版感知数据表列
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
flink sql 如何往一个未定义列的表中写入数据？
223
3
0
Flink有没有办法变更自定义计算列的顺序?
61
1
0
我们对holo 进行计数，不指定cdc 模式，增加列导致数据又被计算了一次。Flink这个合理吗？
67
0
0
对于Flink CDC，这个报错是cdc3.1.0还不支持mysql的列字段名变更功能采集吗
112
1
0
对于Flink CDC，数值型的列变成了字母串可能是什么问题？
67
0
0
Flink计算列语法如何写
91
1
0
Flink 写Hologres 时用insert-update，写部分列，会报错，怎么解决啊？
118
1
0
Flink CDC里修改列不支持吗？
58
0
0
Flink sql 增加列 为什么报错非法字符？
136
2
0
有没有什么设置 可以让Flink CDC感知到断连了 然后自动重启cdc任务？
243
2
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199212
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • 抖音基于 Flink 的 DataOps 能力实践
  • 零代码2小时搭建一套轻量级ERP系统
  • 规则引擎开发现在已经演化成算法引擎了
  • H5页面适配大屏和小屏的方案
  • 除了Foldables.js库，还有哪些库可以实现折叠屏适配？

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • flink的1cu是指1cpu还是1cpu+4g存储？
  • 请问如何用flink sql客户端用yarn application模式提交任务呢？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • Flink-CDC 文档网站地址是什么？
  • 在斗鱼，实时计算发展的历程如何？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
  • 在Flink CDC中ogg可以做实时同步吗？
  • 求教一个问题：我使用flinkcdc采集Oracle 19C数据报错如下：用了什么解决方案？
    • 展开全部
  • 从 Storm 到 Flink，汽车之家基于 Flink 的实时 SQL 平台设计思路与实践
  • Apache Flink 的迁移之路，2 年处理效果提升 5 倍
  • 用Flink取代Spark Streaming！知乎实时数仓架构演进
  • Flink 基础详解：大数据处理的强大引擎
  • Flink CDC：新一代实时数据集成框架
  • 从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
  • Apache Paimon统一大数据湖存储底座
  • Lazada 如何用实时计算 Flink + Hologres 构建实时商品选品平台
  • Flink SQL 详解：流批一体处理的强大工具
  • Flink 四大基石之 Checkpoint 使用详解
    • 展开全部
    还有其他疑问?
    咨询AI助理