开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

,Flink-MySQL-CDC多表关联怎么写入clickhouse?

,Flink-MySQL-CDC多表关联怎么写入clickhouse?

展开
收起
雪哥哥 2022-10-24 17:44:57 1144 0
3 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    首先需要将数据全部读取到Flink中,Flink的Table API可以进行多表查询,查好后问题就简单了,直接写入clickhouse

    2023-01-28 14:49:13
    赞同 展开评论 打赏
  • 可以使用Flink的Table API,将MySQL中的多个表的数据读取到Flink中,然后使用Table API进行多表关联,最后将结果写入ClickHouse中。

    2023-01-17 16:08:37
    赞同 展开评论 打赏
  • 十分耕耘,一定会有一分收获!

    楼主你好,基于Flink CDC技术,实时采集MySQL数据库表数据,进行ETL转换处理,最终存储Hudi表。 MySQL数据库创建表,实时添加数据,通过Flink CDC将数据写入Hudi表,并且Hudi与Hive集成,自动在hive中创建表与添加分区信息,最后hive终端beeline查询分析数据。

    2023-01-16 11:29:37
    赞同 1 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    One Box: 解读事务与分析一体化数据库 HybridDB for MySQL 立即下载
    One Box:解读事务与分析一体化数据库HybridDB for MySQL 立即下载
    如何支撑HTAP场景-HybridDB for MySQL系统架构和技术演进 立即下载

    相关镜像