sparksql用编程的方式和反射的方式注册临时表,哪一种的应用场景更好点?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

sparksql用编程的方式和反射的方式注册临时表,哪一种的应用场景更好点?

2018-12-03 18:10:19 1938 2

一般我会选用编程的方式,不易出错!

取消 提交回答
全部回答(2)
  • 沐远
    2020-03-21 17:19:38

    建议使用变成的方式注册临时表,这样更易管理

    0 0
  • murrowhuang
    2019-07-17 23:18:08

    (一)分批执行,就是把几万个id,按3000一组查询一次,最后把所有的查询结果在汇合起来。

    (二)使用join,把几万个id创建成一张hive表,然后两表关联,可以一次性把结果给获取到。

    0 0
添加回答
0
文章
312
问答
问答排行榜
最热
最新
相关电子书
更多
OceanBase 入门到实战教程
立即下载
阿里云图数据库GDB,加速开启“图智”未来.ppt
立即下载
实时数仓Hologres技术实战一本通2.0版(下)
立即下载