AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

flink采集mysql的数据，设置的StartupOptions.initial() ，理论上应该

flink采集mysql的数据，设置的StartupOptions.initial() ，理论上应该是读取完快照数据后，切换为读取binlog数据，但是现在不读了

展开
收起
雪哥哥 2022-10-31 18:46:12 1187 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • wljslmz
    公众号：网络技术联盟站，InfoQ签约作者，阿里云社区签约作者，华为云 云享专家，BOSS直聘 创作王者，腾讯课堂创作领航员，博客+论坛：https://www.wljslmz.cn，工程师导航：https://www.wljslmz.com

    需要先看下有没有binlog数据的读取，只有开启才能自动读取！

    2022-11-30 22:17:06
    赞同 展开评论
  • 穿过生命散发芬芳

    若是docker版mysql要开启binlog权限。

    show variables like 'log_bin';
echo -e '[mysqld]\npid-file\t= /var/run/mysqld/mysqld.pid\nsocket\t= /var/run/mysqld/mysqld.sock\ndatadir\t= /var/lib/mysql\nsymbolic-links=0\nserver-id = 1\nlog-bin = binlog\nlog-bin-index = binlog.index'>mysqld.cnf
    2022-11-24 07:30:28
    赞同 展开评论
问答分类：
关系型数据库 MySQL 流计算 实时计算 Flink版 云数据库 RDS MySQL 版
问答标签：
实时计算 Flink版数据 云数据库 RDS MySQL 版数据 实时计算 Flink版mysql flink云数据库 RDS MySQL 版 实时计算 Flink版mysql数据
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
canal如何实现将mysql多张表(月表)采集入库到目标表中(一张表)？
178
0
0
请教下，flink 实时采集mysql 数据报错，有遇到的吗？
111
1
0
mysql 表将有默认值的列改为null，flinkcdc采集的数据不是null而是默认值，怎么办？
118
1
0
flinkcdc 采集mysql出现卡在某个binlog文件出不来怎么办？
79
0
0
flinkCDC-3.1.1 yaml模式采集mysql到doris该怎么进一步确定是不是网络问题？
72
1
0
有两套flink cdc程序分别在国内海外分别采集同一个mysql集群表，请问有什么方法？
51
1
0
对于Flink CDC，这个报错是cdc3.1.0还不支持mysql的列字段名变更功能采集吗
88
1
0
FlinkCdc采集Mysql数据，在多并行度情况下，如何保证数据的顺序性
177
0
0
在Flink CDC中MySQL采集时出现字段变更时报错，3.1.1是还不支持吗？
98
1
0
DataWorks数据地图抽取mysql元数据的时候，配置采集计划测试连通性，一直报错，怎么解决？
71
1
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199212
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • mysql数据备份方式，如何恢复？你们的备份策略是什么？
  • SQL在线美化工具
  • MySQL存储引擎简介
  • 在Linux系统中安装JDK、Tomcat、MySQL以及部署J2EE后端接口
  • 【赵渝强老师】在PostgreSQL中访问Oracle

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • 如何用实时数据同步打破企业数据孤岛？
  • PyFlink有什么优势吗？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • Apache Flink未授权访问上传导致的RCE漏洞，这个漏洞目前方案解决吗？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • Flink默认先全量再增量同步，全量时会对checkpoint上锁，导致请求检查点时失败，任务重启
  • Flink CDC有老师遇到过 polarDB 的 mysql-cdc 有问题的?
  • Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
  • 各位大佬，flinksql可以实现多流join吗，比如十几张表join
    • 展开全部
  • 独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
  • Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
  • 流计算StreamCompute
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
  • 流计算精品翻译: The Dataflow Model
  • Flink SQL 功能解密系列 —— 流式 TopN 挑战与实现
  • 基于实时计算（Flink）打造一个简单的实时推荐系统
  • 史上超强阵容！大数据及人工智能领域顶级盛会，Flink Forward Asia 2019 不容错过！
  • 基于Flink的实时日志分析系统实践
  • 使用 Kafka 和 Flink 构建实时数据处理系统
    • 展开全部
    还有其他疑问?
    咨询AI助理