Dremio

将 Looker 实例连接到 Dremio 数据库以分析数据。本文档介绍了如何在 Looker 中设置连接参数,以及如何配置选项来加密网络流量。 Looker 会针对 Dremio 1.4.9 企业版、Dremio 11+ 和 Dremio 26+(企业版和云端版)测试方言兼容性。

加密网络流量

对 Looker 应用与数据库之间的网络流量进行加密是一种最佳实践。可以考虑启用安全的数据库访问文档页面上介绍的某个选项。

创建 Looker 与数据库的连接

请按照以下步骤创建从 Looker 到数据库的连接:

  1. 在 Looker 的管理 部分中,选择连接 ,然后点击添加连接 。
  2. 填写连接详情。这些设置中的大多数设置对于大多数数据库方言都是通用的。如需了解相关信息,请参阅将 Looker 连接到数据库文档页面。下面介绍了一些设置。在所有其他字段中使用默认值,或将其留空。

    • 名称:为连接分配一个唯一名称。LookML 会使用此名称来引用此连接。
    • 方言:选择 Dremio 26.0+ (Arrow Flight SQL)、Dremio 11+ 或 Dremio。

    • 主机:输入运行 Dremio 的服务器的 IP 地址或主机名。对于 Dremio Cloud,请输入 Flight 端点(例如 data.dremio.cloud 或 data.eu.dremio.cloud)。

    • 端口:

      • 对于 Dremio 26.0+ (Arrow Flight SQL):默认端口为 32010(对于 Dremio Cloud,则为 443)。
      • 对于 Dremio 11+ 和 Dremio:默认端口为 31010。
    • 数据库:默认值为 DREMIO(或目标目录名称)。

    • 架构:(可选,仅限 Dremio 26.0+ (Arrow Flight SQL) )输入要用于查询的默认空间或架构(例如 my_space 或 my_catalog.my_schema)。

    • 用户名:输入 Looker 用于访问 Dremio 的用户名。

    • 密码:输入与该用户名关联的密码(或个人访问令牌)。

    • 启用 SSL:开启此选项可启用通过 Arrow Flight / TLS 进行的加密通信。

    • 验证 SSL 证书:如果您使用的是自签名证书或内部证书,且没有标准证书授权机构 (CA) 验证,请关闭此选项以停用证书验证。

    • 其他 JDBC 参数:添加任何其他 JDBC 参数。如需查看 Looker 支持的参数列表,请参阅本页面的支持的 JDBC 参数部分。

  3. 如需验证连接是否成功,请点击连接设置 页面底部的状态详情 部分中的测试连接 按钮。

  4. 如果 Looker 显示可以连接,请按连接 以创建连接。

然后,您的数据库连接会添加到 Looker 连接 管理 页面上的列表中。

调试

将 Web 浏览器连接到服务器上的 dremio_host:9047。在 SQL 编辑器中,运行 SELECT 1 FROM (VALUES(1)) 以验证 Dremio 是否已正确安装,以及查询是否能够执行。

支持的 JDBC 参数

对于 Dremio,Looker 支持在连接的 其他 JDBC 参数 字段中使用以下 JDBC 参数。如需了解这些参数,请参阅数据库的相关文档。

Dremio 26.0+ (Arrow Flight SQL) 参数

  • useEncryption
  • disableCertificateVerification
  • schema
  • catalog
  • token
  • useKerberos
  • threadPoolSize

Dremio 和 Dremio 11+ 参数

  • disableCertificateVerification
  • impersonation_target
  • password
  • projectId
  • routing_queue
  • routing_tag
  • socksProxyHost:对于公开的 Looker 实例,socksProxyHost 参数的值必须是实例的公共 IP 地址。
  • socksProxyPassword
  • socksProxyPort
  • socksProxyUsername
  • ssl
  • token_type
  • user

功能支持

如需让 Looker 支持某些功能,您的数据库方言也必须支持这些功能。

Dremio 26.0+ (Arrow Flight SQL) 功能支持

截至 Looker 26.20,Dremio 26+(使用 Arrow Flight SQL)支持以下功能:

功能 是否支持?
Looker (Google Cloud Core)
对称聚合
派生表
基于 SQL 的永久性派生表
原生永久性派生表
稳定视图
终止查询
基于 SQL 的数据透视
时区
SSL
小计
其他 JDBC 参数
区分大小写
位置类型
名单类型
百分位
不同值百分位
SQL Runner “Show Processes”
SQL Runner “Describe Table”
SQL Runner “Show Indexes”
SQL Runner “Select 10”
SQL Runner “Count”
SQL “Explain”
OAuth 2.0 凭证
上下文注释
连接池
HLL 草图
汇总感知
增量 PDT
毫秒
微秒
物化视图
与前一时间段相比的衡量指标
近似计数不同
数据库内分析模型
自定义日历

Dremio 11+ 功能支持

截至 Looker 26.20,Dremio 11+ 支持以下功能:

功能 是否支持?
Looker (Google Cloud Core)
对称聚合
派生表
基于 SQL 的永久性派生表
原生永久性派生表
稳定视图
终止查询
基于 SQL 的数据透视
时区
SSL
小计
其他 JDBC 参数
区分大小写
位置类型
名单类型
百分位
不同值百分位
SQL Runner “Show Processes”
SQL Runner “Describe Table”
SQL Runner “Show Indexes”
SQL Runner “Select 10”
SQL Runner “Count”
SQL “Explain”
OAuth 2.0 凭证
上下文注释
连接池
HLL 草图
汇总感知
增量 PDT
毫秒
微秒
物化视图
与前一时间段相比的衡量指标
近似计数不同
数据库内分析模型
自定义日历

Dremio 功能支持

截至 Looker 26.20,Dremio 支持以下功能:

功能 是否支持?
Looker (Google Cloud Core)
对称聚合
派生表
基于 SQL 的永久性派生表
原生永久性派生表
稳定视图
终止查询
基于 SQL 的数据透视
时区
SSL
小计
其他 JDBC 参数
区分大小写
位置类型
名单类型
百分位
不同值百分位
SQL Runner “Show Processes”
SQL Runner “Describe Table”
SQL Runner “Show Indexes”
SQL Runner “Select 10”
SQL Runner “Count”
SQL “Explain”
OAuth 2.0 凭证
上下文注释
连接池
HLL 草图
汇总感知
增量 PDT
毫秒
微秒
物化视图
与前一时间段相比的衡量指标
近似计数不同
数据库内分析模型
自定义日历

原生 Arrow Flight SQL 与旧版自定义驱动程序对比

Looker 使用捆绑的 Apache Arrow Flight SQL JDBC 驱动程序,原生支持 Dremio 26.0+ (Arrow Flight SQL) 。对于 Dremio 26+ 实例,不再需要安装未打包的自定义 JDBC 驱动程序 JAR 文件。

对于客户托管实例上使用旧版 Dremio 且不支持原生 Arrow Flight 的旧版 Dremio 部署,请参阅未打包的 JDBC 驱动程序文档页面。

后续步骤

完成数据库连接后,请配置身份验证选项。