开发者社区> 问答> 正文

想问下目前 flink mysql sink想要实现按时间分库分表 有什么配置项可以使用嘛?

想问下目前 flink mysql sink想要实现按时间分库分表 有什么配置项可以使用嘛?

我目前的需求是数据源经过一个简单的etl处理写入到mysql中,供业务实时查询。由于业务场景只需要查询当天的数据(历史数据有另外的离线模块处理),所以想每天的数据单独写入一张表中(表名为xxxxxx_YYYYMMDD)这样。但目前Flink JDBC sink是要指定表名的。请问下有什么简单的实现方案嘛?或者说对于我这样的场景有什么更好的实现方式嘛?

多谢。

*来自志愿者整理的flink邮件归档

展开
收起
彗星halation 2021-12-08 10:37:12 1433 0
1 条回答
写回答
取消 提交回答
  • 我理解这个除了指定表名,关键是要在数据库中自动建表吧,JDBC 这边之前有个相关issue我跟进过[2],不过代码还没进,暂时还没有好的办法。Es connector 是支持类似功能的,如果数据可以放在es可以使用下 ] https://issues.apache.org/jira/browse/FLINK-16294 https://issues.apache.org/jira/browse/FLINK-16294

    *来自志愿者整理的flink

    2021-12-08 11:10:33
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载

相关镜像