Cloud Data Fusion 簡介：控制台

本頁面介紹 Cloud Data Fusion 控制台，又稱為控制層。這是一組 API 作業和 Google Cloud 控制台介面，可讓您管理 Cloud Data Fusion 執行個體。舉例來說，您可以使用控制台建立、刪除、重新啟動或更新執行個體。

事前準備

Cloud Data Fusion：控制台總覽

以下各節說明控制台的重要功能。

執行個體

執行個體是 Cloud Data Fusion 的專屬部署作業。如要開始使用 Cloud Data Fusion，請在 Google Cloud 控制台中建立執行個體。您可以在單一Google Cloud 專案中建立多個 Cloud Data Fusion 執行個體。您可以為每個執行個體指定 Google Cloud 區域。每個執行個體都是獨立的 Cloud Data Fusion 部署，其中包含的一組服務會負責管道生命週期管理、自動化調度管理、協調作業及中繼資料管理。這些服務會使用租戶專案內的長期執行資源來執行。

建立執行個體時，請考慮下列選項。

版本

您可以在下列任一 Cloud Data Fusion 版本中建立執行個體：Developer、Basic 或 Enterprise。請根據下列條件選擇版本：

  • 費用
  • 管道執行作業的並行限制
  • 角色型存取權控管 (RBAC) 適用情形

這些版本適用於下列用途：

Cloud Data Fusion 版本 用途
開發人員版本 適用於開發、測試或小規模整合
基本版 適合需求適中的製作
Enterprise 版 適用於具備 RBAC 的大規模重要資料管道

公開或私人執行個體

請根據需求決定是否需要公開或私人執行個體。Cloud Data Fusion 私人執行個體和公開執行個體的主要差異在於網路連線和安全性：

Cloud Data Fusion 執行個體類型 行為
公開執行個體
  • 網路連線：使用公開 IP 位址連線至網際網路。
  • 資料存取權：直接存取公網上的資料來源。
詳情請參閱「建立公開執行個體」。
私人執行個體
  • 網路連線：使用虛擬私有雲 (VPC) 網路中的私人 IP 位址。
  • 資料存取權：需要預先設定連線，才能存取資料來源。系統支援下列連結：
    • 透過 VPN 或 Cloud Interconnect 連線的地端部署資料來源。
    • 在同一個虛擬私有雲中以私密方式執行的其他 Google Cloud 服務。

授權和服務帳戶

Cloud Data Fusion 通常有兩個服務帳戶：

設計階段服務帳戶
這個 Google 代管的服務帳戶稱為 Cloud Data Fusion API 服務代理人，用於 Cloud Data Fusion 的租戶專案，可存取客戶專案資源。
執行階段服務帳戶
這是 Cloud Data Fusion 建立的預設 Compute Engine 服務帳戶，用於部署會存取其他Google Cloud 資源的作業。根據預設，這項服務會附加至 Managed Service for Apache Spark 叢集 VM，讓 Cloud Data Fusion 在管道執行期間存取 Managed Service for Apache Spark 資源。

詳情請參閱「Cloud Data Fusion 中的服務帳戶」。

記錄和監控

Cloud Logging 和 Cloud Monitoring 對於深入瞭解 Cloud Data Fusion 管道的健康狀態和效能至關重要。您只能在建立 Cloud Data Fusion 執行個體時啟用記錄和監控功能。

啟用記錄和監控功能後，您就能在 Google Cloud 控制台的「記錄檢視器」頁面中，查看 Cloud Data Fusion 管道記錄。

Monitoring 提供 Cloud Data Fusion 的內建資訊主頁。您也可以建立自訂資訊主頁，監控特定指標。

與 Knowledge Catalog 整合歷程

Cloud Data Fusion 提供與 Knowledge Catalog 的整合，可追蹤資料歷程。詳情請參閱「在 Knowledge Catalog 中查看歷程」。

加密

客戶管理的加密金鑰 (CMEK) 可讓您使用可透過 Cloud Key Management Service 控管的金鑰，對靜態資料進行加密。CMEK 可讓使用者控管寫入 Google Cloud 租戶專案內部資源的資料，以及 Cloud Data Fusion 管道寫入的資料。詳情請參閱「客戶管理的資料加密」。

使用角色型存取控管 (RBAC) 管理權限

Cloud Data Fusion 可讓您透過 Identity and Access Management (IAM) 控管存取權。

如要針對在 Cloud Data Fusion 中執行的動作 (Studio 作業) 設定精細權限，請使用 RBAC。詳情請參閱 RBAC 總覽。

版本升級

Cloud Data Fusion 有多個版本。您可以在 Cloud Data Fusion 控制台中，將執行個體升級至較新版本。詳情請參閱「Cloud Data Fusion 中的版本管理」。

後續步驟