开发者社区> 问答> 正文

Spark sql怎样实现即席查询?

是不是 创建索引好一点?

展开
收起
hbase小助手 2018-11-19 19:32:37 4855 0
2 条回答
写回答
取消 提交回答
  • 1、spark本身不支持创建索引,不过有基于spark的社区项目支持给spark的表创建二级索引 https://github.com/Intel-bigdata/OAP 2、针对即系场景的加速,可以使用spark的cache技术

    2020-03-21 17:28:59
    赞同 展开评论 打赏
  • 研究spark/hive/hbase相关技术

    spark目前还不支持索引,主要使用场景还是离线分析,可以借助一些数据格式,如carbondata(带二级索引)/parquet(索引正在做), 把表cache到内存能够解决部分即席查询的需求。

    2019-07-17 23:15:27
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
SQL Server 2017 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载