AI 助理
备案控制台
开发者社区 大数据与机器学习 正文

请教各位大神： flink SQL 执行批处理时，如果我有两个表需要关联，那Flink-SQL写的j

请教各位大神： flink SQL 执行批处理时，如果我有两个表需要关联，那Flink-SQL写的join执行时，是不是需要先把两个表的数据都查出来，然后在Flink的内存中进行JOIN？ 这样是不是比我在关系型数据库中执行JOIN性能低很多了？

展开
收起
真的很搞笑 2023-04-26 10:31:01 153 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 芯在这

    flink有几种不同类型的join，这个执行过程 还真的比较复杂 应该不是 一两句话能说的清楚的.. 我自己有做过一个类似的etl的功能 需要考虑各种一致性的问题 ..，https://nightlies.apache.org/flink/flink-docs-release-1.16/zh/docs/dev/table/sql/queries/joins/ 官方关于Join的文档，可以看看，此回答整理自钉群“Flink CDC 社区”

    2023-04-27 15:07:16
    赞同 展开评论
问答分类：
SQL 关系型数据库 流计算 实时计算 Flink版 云原生数据库 PolarDB
问答标签：
实时计算 Flink版批处理 实时计算 Flink版SQL flink SQL SQL批处理 SQL flink
问答地址：
开发者社区 > 大数据与机器学习 > 问答
相关问答
在Flink大概什么样的场景会需要用到流批一体？一边处理实时流，一边批处理历史数据
148
1
0
在Flink CDC中批处理之后得度量数据为什么就不能拿了呢？
64
0
0
Flink CDC里1.16版本的flink-sql 不支持多if嵌套了嘛？
117
0
0
flink cdc 可以在flink-sql cli里面使用吗？报错如下怎么办？
102
1
0
Flink CDC在flink-sql中不知道应该怎样对应了？
146
2
0
Flink任务编排 可以跑 msyql同步到mysql的批处理任务吗？
140
2
0
Flink 1.15 引入的自适应批处理调度器的主要优点是什么？
66
1
0
flink 批处理，source 和sink 都是holo ，有哪篇文章可以参考？
85
1
0
问一下flink批处理，join超20张表会报空指针，这边是不是有什么限制在里面？
152
7
0
Flink批处理之后得度量数据为啥就不能拿了呢？
122
7
0

大数据与机器学习

大数据领域前沿技术分享与交流，这里不止有技术干货、学习心得、企业实践、社区活动，还有未来。

我要提问

相关文章

  • 五星认可！瑞数信息入选IDC中国WAAP厂商技术能力评估报告
  • 《3D游戏动作交互优化：剑舞穿模与落地延迟的解决策略》
  • 基于springboot的郑州旅游景点推荐系统
  • 基于SpringBoot的社区老年食堂系统
  • @Update注解批量更新始终报错

    • 热门讨论

    热门文章

  • P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • 大数据计算MaxCompute的datawork做数据同步的时候，可以解决源系统表名不固定的情况嘛？
  • 核桃编程是什么？
  • 阿里云和腾讯云服务器哪个好！
  • 数据来源：com.alibaba.fastjson.JSONException: syntax er
  • 有人知道server busy是什么情况吗？
  • 阿里云磁盘大小是多少？
  • ODPS 的下一个15年，大数据将迎来春天还是寒冬？
  • 在斗鱼，实时计算发展的历程如何？
    • 展开全部
  • 身怀绝技的开发者们，快来DataV玩转可视化组件
  • 阿里封神谈hadoop生态学习之路
  • 【玩转数据系列十】利用阿里云机器学习在深度学习框架下实现智能图片分类
  • 你刚吃的兰州牛肉面，背后就藏着大数据
  • 大数据环境下该如何优雅地设计数据分层
  • odps是什么?
  • 数据仓库介绍与实时数仓案例
  • DataV接入ECharts图表库 可视化利器强强联手
  • 阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
  • 吴刚专访--大数据和 MaxCompute 技术和故事
    • 展开全部
    还有其他疑问?
    咨询AI助理