开发者社区> 问答> 正文

sparksql用编程的方式和反射的方式注册临时表,哪一种的应用场景更好点?

一般我会选用编程的方式,不易出错!

展开
收起
hbase小助手 2018-12-03 18:10:19 3358 0
2 条回答
写回答
取消 提交回答
  • 建议使用变成的方式注册临时表,这样更易管理

    2020-03-21 17:19:38
    赞同 展开评论 打赏
  • (一)分批执行,就是把几万个id,按3000一组查询一次,最后把所有的查询结果在汇合起来。

    (二)使用join,把几万个id创建成一张hive表,然后两表关联,可以一次性把结果给获取到。

    2019-07-17 23:18:08
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
“静态调用链路发现”应用场景分析及实践探索 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
“静态调用链路发现“在APM中的应用场景分析及实践探索 立即下载