开发者社区 问答 正文

sparksql用编程的方式和反射的方式注册临时表,哪一种的应用场景更好点?

一般我会选用编程的方式,不易出错!

展开
收起
hbase小助手 2018-12-03 18:10:19 3456 分享 版权
2 条回答
写回答
取消 提交回答
  • 建议使用变成的方式注册临时表,这样更易管理

    2020-03-21 17:19:38
    赞同 展开评论
  • (一)分批执行,就是把几万个id,按3000一组查询一次,最后把所有的查询结果在汇合起来。

    (二)使用join,把几万个id创建成一张hive表,然后两表关联,可以一次性把结果给获取到。

    2019-07-17 23:18:08
    赞同 展开评论
问答地址: