AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

Flink CDC starrocks 3.2版本 有这个提示是什么原因？

Flink CDC starrocks 3.2版本提示：重新删掉 meta 和 storage 下数据，是什么原因？image.png

展开
收起
真的很搞笑 2023-12-31 08:55:19 110 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 喜欢猪猪
    网站：http://ixiancheng.cn/ 微信订阅号：小马哥学JAVA

    image.png

    从报错的日志可以看出来，是子分区的列重复导致的错误。解决方式：
    第一：确保MySQL主从复制和备份恢复的配置能够尽量减少重复事件的发生。例如，可以通过调整binlog_format参数来控制MySQL Binlog的格式，以减少重复事件的数量。

    第二：使用Flink CDC的重试机制。虽然这可能会增加一些额外的开销，但是它可以保证在处理重复事件时不会丢失任何数据。

    第三：对于特定的应用场景，可以考虑使用更高级的解决方案，如基于Kafka或Pulsar等消息队列的CDC服务，这些服务通常具有更好的容错能力和处理重复事件的能力。

    2023-12-31 11:44:26
    赞同 展开评论
  • 芯在这

    be没挂载成功吧，SHOW PROC '/backends';看下 ，此回答整理自钉群“Flink CDC 社区”

    2023-12-31 12:07:55
    赞同 展开评论
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版CDC 实时计算 Flink版starrocks 实时计算 Flink版版本 实时计算 Flink版cdc版本
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
flink cdc 3版本，数据从mysql 到starrocks 标段没有变化？是啥原因？
110
1
0
在Flink CDC中我看日志监控到了，但是starrocks中并没有删除操作呢？
93
0
0
Flink数据输出至starrocks结果表
89
1
0
请教一下 使用flink cdc 同步 mysql->starrocks cdc报错怎么处理？
126
1
0
flink cdc我用sql server-->starrocks都到不了秒级，要3秒左右怎么回事？
144
1
0
flink和starrocks两个sql写在同一个作业下面的话 是会写的顺序执行么？
66
1
0
在Flink CDC中，CDC 同步MySql到StarRocks 离线阶段报了这个错？
77
1
0
Flink的jar作业的方式 starrocks是没有对应的connector包么？
74
1
0
在Flink想用DataStream的方式读取starrocks的数据 但是没有连接器要怎么处理？
107
1
0
在Flink CDC中同步MySQL到starrocks的时候，作业启动时候报这样的错误是怎么回事？
69
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关文章

  • 实时计算系列-----第一话：前言
  • Flink Agents：基于Apache Flink的事件驱动AI智能体框架
  • 基于实时迭代的数值鲁棒NMPC双模稳定预测模型（Matlab代码实现）
  • 基于模型预测控制对PMSM进行FOC控制，模拟控制了PMSM的速度（Simulink仿真实现）
  • 解析pg_stat_replication状态字段的枚举值

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • 请问如何用flink sql客户端用yarn application模式提交任务呢？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • flink的1cu是指1cpu还是1cpu+4g存储？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • flink-CDC-3.0 mysql to doris 数据同步任务 经常报错
  • 在斗鱼，实时计算发展的历程如何？
  • Flink-CDC 文档网站地址是什么？
  • Flink CDC中，有哪位大佬有flink 版本和cdc版本的适配统计啊？
  • Flink CDC里用jdbc往达梦dm8推数据，老是显示字符被截断是咋回事？有人碰到过嘛？
    • 展开全部
  • 数据仓库介绍与实时数仓案例
  • 独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
  • 实时计算 Flink SQL 核心功能解密
  • 流计算StreamCompute
  • 通过Flink实时构建搜索引擎的索引
  • 阿里云实时计算产品案例&解决方案汇总
  • 接着！！Apache Flink 全领域干货合集（持续更新）
  • 回顾 | Kafka x Flink Meetup 与世界人工智能大会大数据 AI 专场精彩回顾（附PPT下载）
  • Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
  • 基于Flink的实时日志分析系统实践
    • 展开全部
    还有其他疑问?
    咨询AI助理