Dremio与Drill的对比

本文涉及的产品
密钥管理服务KMS,1000个密钥,100个凭据,1个月
简介: 1.简述Dremio与Drill简述2.区别a).数据源支持使用最新版本Dremio 3.3.1和Drill 1.16.0Dremio3.1.3版本开始不支持HBase,将来会开源社区版HBase连接器b).

1.简述

Dremio与Drill简述

2.区别

a).数据源支持

使用最新版本Dremio 3.3.1和Drill 1.16.0
Dremio3.1.3版本开始不支持HBase,将来会开源社区版HBase连接器

image
image

b).自定义功能扩展

  • Dremio无自定义功能开发API
  • Drill有自定义功能开发API: 开发SQL自定义聚合函数,但该功能处于实验阶段

3.性能对比

a).Dremio聚合查询性能

  1. 明细数据79457153条,聚合结果510002条
  2. 原始数据聚合查询3分41秒,使用数据反射聚合查询小于1s
  3. CPU消耗:原始数据聚合时间长使用低,数据反射聚合时间短使用高

image

图1 Dremio聚合查询数据量及耗时

image

图2 Dremio聚合查询CPU使用

b).Drill聚合查询性能

  1. 明细数据39634975条,聚合结果500000条
  2. 原始数据聚合查询3分6秒

image
image

图3 Drill聚合查询

4.Dremio未开源部分

Dremio主要未开源部分如下:

a).数据安全

  1. 用户、组和角色的管理
  2. 数据源的共享
  3. 虚拟数据源之上的行、列级权限控制
  4. 个人访问令牌(PAT)

b).Wire Encryption(线加密)

  1. 全线加密
  2. ODBC / JDBC客户端加密
  3. 集群内加密
  4. 仅Web服务器加密(开源)

c).REST API

  1. 工作负载管理API
  2. 用户和令牌相关API
  3. 检索所有数据反射和根据摘要检索数据反射
  4. 仅根据Id检索数据反射、创建、修改和删除检索数据反射(开源)

d).单点登陆(SSO)

e).LDAP身份验证(轻型目录访问协议)

目录
相关文章
|
6月前
|
SQL Apache 流计算
Apache Doris + Paimon 快速搭建指南|Lakehouse 使用手册(二)
为大家介绍 Lakehouse 使用手册(二)之 Apache Doris + Apache Paimon 搭建指南。
|
8月前
|
SQL 分布式计算 Java
Apache Hudi与Hive集成手册
Apache Hudi与Hive集成手册
426 0
|
SQL 数据库 HIVE
数据仓库的Hive的Hive架构的用户接口的CLI
Hive提供了一系列用户接口,可以方便地进行数据仓库的管理和操作。其中,CLI(命令行界面)是一种非常常用的用户接口,可以通过命令行进行Hive的管理和操作。
159 0
|
SQL 分布式计算 监控
Kylin 是什么?
Apache Kylin™是一个开源的、分布式的分析型数据仓库,提供Hadoop/Spark 之上的 SQL 查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由 eBay 开发并贡献至开源社区。它能在亚秒内查询巨大的表。
241 1
Kylin 是什么?
|
SQL 存储 分布式计算
Presto实现Hive Connector的配置实录
学习一个东西,个人认为最好的方式是:官网+源码+实践。 Postgre官网:https://prestodb.io
723 1
Presto实现Hive Connector的配置实录
|
SQL 存储 分布式计算
【Kylin】(一)初识 Apache Kylin 2
【Kylin】(一)初识 Apache Kylin 2
325 0
【Kylin】(一)初识 Apache Kylin 2
|
SQL 存储 分布式计算
【Kylin】(一)初识 Apache Kylin 1
【Kylin】(一)初识 Apache Kylin 1
303 0
【Kylin】(一)初识 Apache Kylin 1
|
存储 分布式计算 关系型数据库
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
1670 0
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
|
安全 网络协议 Java
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
297 0
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
|
SQL 分布式计算 前端开发