Cloud Data Fusion 簡介：控制台

Cloud Data Fusion 控制台 (也稱為「控制層」) 可讓您透過一組 API 作業和 Google Cloud 控制台介面管理 Cloud Data Fusion 執行個體。例如，您可以建立、刪除、重新啟動或更新執行個體。

事前準備

Cloud Data Fusion：控制台總覽

以下各節將說明控制台的重要面向。

執行個體

執行個體是 Cloud Data Fusion 的專屬部署作業。如要開始使用 Cloud Data Fusion，請在 Google Cloud 控制台建立執行個體。您可以在單一Google Cloud 專案中建立多個 Cloud Data Fusion 執行個體。您可以為每個執行個體指定 Google Cloud 區域。每個執行個體都是獨立的 Cloud Data Fusion 部署作業，內含一組服務，可處理管道生命週期管理、自動化調度管理、協調和中繼資料管理。這些服務會使用租戶專案中的長時間執行資源。

建立執行個體時，請考量下列選項。

版本

您可以在下列其中一個 Cloud Data Fusion 版本中建立執行個體：Developer、Basic 或 Enterprise。請根據下列條件選擇版本：

  • 費用
  • 管道執行作業的並行限制
  • 角色式存取控管 (RBAC) 可用性

這些版本適用於下列用途：

Cloud Data Fusion 版本 用途
開發人員版本 適合開發、測試或小規模整合
基本版 適合需求適中的正式環境
Enterprise 版 適用於具備 RBAC 的大規模重要資料管道

公開或私人執行個體

請根據需求決定是否需要公開或私有執行個體。Cloud Data Fusion 私人執行個體和公有執行個體的主要差異在於網路連線和安全性：

Cloud Data Fusion 執行個體類型 行為
公開執行個體
  • 網路連線：使用公開 IP 位址連線至網際網路。
  • 資料存取：直接存取公開網際網路上的資料來源。
詳情請參閱「建立公開執行個體」。
私人執行個體
  • 網路連線：使用虛擬私有雲 (VPC) 網路中的私人 IP 位址。
  • 資料存取權：需要預先設定連線，才能存取資料來源。支援下列連線：
    • 透過 VPN 或 Cloud Interconnect 連線的地端部署資料來源。
    • 在同一個虛擬私有雲中私下執行的其他 Google Cloud 服務。

授權和服務帳戶

Cloud Data Fusion 通常有兩個服務帳戶：

設計階段服務帳戶
這個 Google 代管服務帳戶稱為 Cloud Data Fusion API 服務代理，用於 Cloud Data Fusion 的租戶專案，可存取客戶專案資源。
執行階段服務帳戶
這是 Cloud Data Fusion 建立的預設 Compute Engine 服務帳戶，用於部署存取其他Google Cloud 資源的工作。根據預設，這個帳戶會附加至 Managed Service for Apache Spark 叢集 VM，讓 Cloud Data Fusion 能夠在管道執行期間存取 Managed Service for Apache Spark 資源。

詳情請參閱「Cloud Data Fusion 中的服務帳戶」。

記錄和監控

Cloud Logging 和 Cloud Monitoring 是瞭解 Cloud Data Fusion 管道健康狀態和效能的重要工具。您只能在建立 Cloud Data Fusion 執行個體時啟用記錄和監控功能。

啟用記錄和監控功能後，您就能在 Google Cloud 控制台的「記錄檢視器」頁面中，查看 Cloud Data Fusion 管道記錄。

Monitoring 提供 Cloud Data Fusion 的內建資訊主頁。您也可以建立自訂資訊主頁，監控特定指標。

與 Knowledge Catalog 整合歷程

Cloud Data Fusion 與 Knowledge Catalog 整合，可提供歷程資訊。詳情請參閱「在 Knowledge Catalog 中查看歷程」。

加密

客戶自行管理的加密金鑰 (CMEK) 可讓您透過 Cloud Key Management Service 控制金鑰，並使用該金鑰加密靜態資料。CMEK 可讓使用者控管寫入 Google Cloud 租戶專案內部資源的資料，以及 Cloud Data Fusion 管道寫入的資料。詳情請參閱「客戶管理的資料加密」。

使用角色式存取控管 (RBAC) 管理權限

Cloud Data Fusion 可讓您透過 Identity and Access Management (IAM) 控管存取權。

如要針對在 Cloud Data Fusion 中執行的動作 (Studio 作業) 設定精細權限，請使用 RBAC。詳情請參閱「RBAC 總覽」。

版本升級

Cloud Data Fusion 有多個版本。您可以在 Cloud Data Fusion 控制台中，將執行個體升級至較新版本。詳情請參閱「Cloud Data Fusion 的版本管理」。

後續步驟