一.简述

Dremio是一款DaaS（Data-as-a-Service）数据即服务平台，可对接多类数据源来进行BI分析；数据可视化依托于Tableau、Power BI和Qlik sense三类产品。

二.功能

a).Dremio支持的数据源

b).Dremio支持数据类型

c).执行任务分析

可分析SQL执行的各环节耗时等，对SQL优化很有帮助

三.下载安装

a).Dremio下载

根据实际应用系统，选择对应版本下载Dremio

dremio-community-3.3.1.tar.gz
dremio-community-3.3.1.noarch.rpm

b).Dremio驱动下载

1).JDBC

Download: dremio-jdbc-driver-3.3.1

2).ODBC

Download For Win: dremio-connector-odbc-1.4.0
Download For Linux: dremio-odbc-1.4.0

c).可视化工具下载

1).Qlik Sense

Qlik_Sense_Desktop免费试用版

2).Tableau

TableauDesktop免费试用版
TableauPublicDesktop免费版

3).Power BI

PBIDesktop免费试用版

d).安装

1).dremio-connector-odbc安装

2).Tableau安装

3).Dremio安装

rpm -ivh dremio-community-3.3.1-201907291852280797_df23756_1.noarch.rpmtar -zxvf dremio-community-3.3.1-201907291852280797-df23756.tar.gz

4).修改配置

paths: {  # the local path for dremio to store data.  local: ${DREMIO_HOME}"/data"  # the distributed path Dremio data including job results, downloads, uploads, etc  #dist: "pdfs://"${paths.local}"/pdfs"}services: {  coordinator.enabled: true,  coordinator.master.enabled: true,  executor.enabled: true}registration.publish-host: "hostname"## Use External Zookeeperservices.coordinator.master. ded-zookeeper.enabled: falsezookeeper: "hostname1:2181,hostname2:2181,hostname3:2181"

四.案例

a).hive数据分析

Dremio案例_Hive数据分析

b).hdfs数据分析

Dremio案例_HDFS文件数据分析

c).本地Json文件数据分析

Dremio案例_本地Json文件数据分析

d).Elasticserch数据分析

Dremio案例_Elasticserch数据分析