开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks实时同步读MySQL报错binlog位点过期?

DataWorks实时同步读MySQL报错binlog位点过期?

展开
收起
芯在这 2023-04-19 23:42:38 218 0
1 条回答
写回答
取消 提交回答
  • 现象:实时同步日志报错数据库位点过期,请重新选择位点,源库可用最早位点:2022-12-09 11:21:58 binlog(mysql-bin.0xxxx63:1259) (数据源:ph_shxxxxxxsql) image.png

    解决:binlog日志两个条件会导致持久化,日志信息不在本地:1.到了设置的保存时长 ;2.超过了一定的存储大小。 建议实时任务启动时重置位点,指定到源库可用最早位点,留一点buffer时间 ;丢失的这段时间的数据只能通过离线任务再同步过来。,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-04-20 10:55:14
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关镜像