创建集成式 DBT 和 Managed Airflow 操作环境

Managed Airflow(第 3 代) | Managed Airflow(第 2 代) | Managed Airflow(旧版第 1 代)

本页面介绍如何使用 Terraform 创建集成的 DBT 和 Managed Airflow 运营环境。

关于 terraform-google-dbt-composer-blueprint` 模块

terraform-google-dbt-composer-blueprint 模块 使用 Terraform 执行以下操作:

  • 在项目中应用所需的 API 和权限。
  • 创建文档(适用于 DBT)存储桶。
  • 创建 Managed Airflow 环境,包括网络配置和服务帐号。
  • 复制 Managed Airflow 的 DAG 实用程序
  • 将项目的审核日志导出到 BigQuery 项目,包括两个具体化视图和一个顶层视图,以支持信息中心。

此外,该模块还提供了一个端到端示例,展示了如何使用 DAG 实用程序并在 Managed Airflow 中创建示例 DBT 作业。

GitHub 上的模块代码

如需了解详情和代码示例,请参阅 GitHub 上的 terraform-google-dbt-composer-blueprint模块 页面。

后续步骤