开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

我想用datastream api写个两个表join的demo,把两个表拉成一个宽表,如果对于每一个

我想用datastream api写个两个表join的demo,把两个表拉成一个宽表,如果对于每一个表的过来的一条记录都保存下来,相当于flink把数据库的两个表都保存下来了,要是过期删掉最后join结果就不对了。大佬们做这种表join的思路是啥?

展开
收起
游客3oewgrzrf6o5c 2022-08-09 18:03:01 436 0
1 条回答
写回答
取消 提交回答
  • 全栈JAVA领域创作者

    在Flink中,你可以使用CoT API来进行两个表的JOIN操作,并且可以将过程保存到数据库中。 下面是一个基本的示例,假设你有两个表table1和table2,它们都有一个名为id的列。你可以使用以下命令将这两个表拉成一个宽表,并将过程保存到数据库中:

    sql Copy code -- 将table1和table2拉成一个宽表 CREATE TABLE joined_table AS SELECT * FROM table1 JOIN table2 ON table1.id = table2.id;

    -- 将宽表保存到数据库中 INSERT INTO my_database.joined_table SELECT * FROM joined_table; 在上面的示例中,我们使用CREATE TABLE命令来创建一个名为joined_table的宽表,并将table1和table2中的数据合并到该表中。然后,我们使用INSERT INTO命令将宽表保存到名为my_database.joined_table的数据库表中。 当然,你可以根据你的需求进行更改,比如可以使用不同的列进行JOIN操作,或者可以在过程中添加其他的操作。

    2023-06-29 09:36:56
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
Spring Boot2.0实战Redis分布式缓存 立即下载
CUDA MATH API 立即下载
API PLAYBOOK 立即下载