Dremio与Drill的对比

简介: 1.简述Dremio与Drill简述2.区别a).数据源支持使用最新版本Dremio 3.3.1和Drill 1.16.0Dremio3.1.3版本开始不支持HBase,将来会开源社区版HBase连接器b).

1.简述

Dremio与Drill简述

2.区别

a).数据源支持

使用最新版本Dremio 3.3.1和Drill 1.16.0
Dremio3.1.3版本开始不支持HBase,将来会开源社区版HBase连接器

image
image

b).自定义功能扩展

  • Dremio无自定义功能开发API
  • Drill有自定义功能开发API: 开发SQL自定义聚合函数,但该功能处于实验阶段

3.性能对比

a).Dremio聚合查询性能

  1. 明细数据79457153条,聚合结果510002条
  2. 原始数据聚合查询3分41秒,使用数据反射聚合查询小于1s
  3. CPU消耗:原始数据聚合时间长使用低,数据反射聚合时间短使用高

image

图1 Dremio聚合查询数据量及耗时

image

图2 Dremio聚合查询CPU使用

b).Drill聚合查询性能

  1. 明细数据39634975条,聚合结果500000条
  2. 原始数据聚合查询3分6秒

image
image

图3 Drill聚合查询

4.Dremio未开源部分

Dremio主要未开源部分如下:

a).数据安全

  1. 用户、组和角色的管理
  2. 数据源的共享
  3. 虚拟数据源之上的行、列级权限控制
  4. 个人访问令牌(PAT)

b).Wire Encryption(线加密)

  1. 全线加密
  2. ODBC / JDBC客户端加密
  3. 集群内加密
  4. 仅Web服务器加密(开源)

c).REST API

  1. 工作负载管理API
  2. 用户和令牌相关API
  3. 检索所有数据反射和根据摘要检索数据反射
  4. 仅根据Id检索数据反射、创建、修改和删除检索数据反射(开源)

d).单点登陆(SSO)

e).LDAP身份验证(轻型目录访问协议)

目录
相关文章
|
7月前
|
SQL 分布式计算 分布式数据库
Hive集成Hue安装部署
Hive集成Hue安装部署
93 0
|
9月前
|
SQL 数据库 HIVE
数据仓库的Hive的Hive架构的用户接口的CLI
Hive提供了一系列用户接口,可以方便地进行数据仓库的管理和操作。其中,CLI(命令行界面)是一种非常常用的用户接口,可以通过命令行进行Hive的管理和操作。
96 0
|
分布式数据库 Hbase
《JanusGraph —Distributed graph database with HBase》电子版地址
JanusGraph —Distributed graph database with HBase
70 0
《JanusGraph —Distributed graph database with HBase》电子版地址
|
SQL 存储 分布式计算
Presto实现Hive Connector的配置实录
学习一个东西,个人认为最好的方式是:官网+源码+实践。 Postgre官网:https://prestodb.io
505 1
Presto实现Hive Connector的配置实录
|
SQL 消息中间件 分布式计算
Presto集成到Ambari介绍
在Ambari中集成Presto,能在Ambari UI中方便地安装部署Presto到集群,并能方便修改Presto相关配置
569 0
|
存储 分布式计算 关系型数据库
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
1404 0
基于MinIO/Deleta Lake/Dremio和Superset或Metabase搭建简单的数据湖
|
安全 网络协议 Java
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
220 0
Dremio: 为 Tableau Desktop 配置 Dremio 连接器
|
SQL 关系型数据库 MySQL
Ambari部署Hive
Ambari部署Hive
126 0
Ambari部署Hive
|
SQL 存储 分布式计算
CDP 的 Hive Metastore 简介
Hive Metastore (HMS) 是一种服务,用于在后端 RDBMS(例如 MySQL 或 PostgreSQL)中存储与 Apache Hive 和其他服务相关的元数据。
CDP 的 Hive Metastore 简介

相关课程

更多