Cloud Data Fusion コンソール（コントロール プレーンとも呼ばれる）では、一連の API オペレーションと Google Cloud コンソール インターフェースを使用して Cloud Data Fusion インスタンスを管理できます。たとえば、インスタンスの作成、削除、再起動、更新を行うことができます。
始める前に
- Cloud Data Fusion API を有効にします。
- Cloud Data Fusion エディションの費用を理解する。
- Cloud Data Fusion のアクセス制御とサービス アカウントについて理解する。
Cloud Data Fusion: コンソールの概要
以降のセクションでは、コンソールの重要な側面について説明します。
インスタンス
インスタンスとは、Cloud Data Fusion 固有のデプロイメントのことです。Cloud Data Fusion の使用を開始するには、 Google Cloud コンソールでインスタンスを作成します。単一のGoogle Cloud プロジェクトに複数の Cloud Data Fusion インスタンスを作成できます。インスタンスごとに Google Cloud リージョンを指定できます。各インスタンスは、固有の独立した Cloud Data Fusion デプロイメントです。このデプロイメントに、パイプラインのライフサイクル管理、オーケストレーション、調整とメタデータの管理を行う一連のサービスが含まれています。これらのサービスは、テナント プロジェクトの長時間実行リソースを使用して実行されます。
インスタンスを作成するときは、次のオプションを検討してください。
Edition
インスタンスは、Cloud Data Fusion の Developer、Basic、Enterprise のいずれかのエディションで作成します。次の基準に基づいてエディションを選択します。
- 費用
- パイプライン実行の同時実行数の上限
- ロールベース アクセス制御（RBAC）の可用性
各エディションは、次のユースケースを対象としています。
| Cloud Data Fusion のエディション | ユースケース |
|---|---|
| Developer Edition | 開発、テスト、小規模な統合の場合 |
| Basic エディション | 中程度のニーズがある本番環境向け |
| Enterprise エディション | RBAC を使用する大規模でミッション クリティカルなデータ パイプライン向け |
パブリック インスタンスまたはプライベート インスタンス
要件に応じて、パブリック インスタンスとプライベート インスタンスのどちらが必要かを決定します。Cloud Data Fusion のプライベート インスタンスとパブリック インスタンスの主な違いは、ネットワーク接続とセキュリティです。
| Cloud Data Fusion インスタンス タイプ | 動作 |
|---|---|
| パブリック インスタンス |
|
| プライベート インスタンス |
|
認可とサービス アカウント
Cloud Data Fusion には 2 つのサービス アカウントがあります。
- 設計時のサービス アカウント
- この Google マネージド サービス アカウント（Cloud Data Fusion API サービス エージェント）は、Cloud Data Fusion のテナント プロジェクトでお客様のプロジェクト リソースにアクセスするために使用されます。
- 実行時のサービス アカウント
- これは、他のGoogle Cloud リソースにアクセスするジョブをデプロイするために Cloud Data Fusion が作成するデフォルトの Compute Engine サービス アカウントです。デフォルトでは、パイプラインの実行中に Cloud Data Fusion が Managed Service for Apache Spark リソースにアクセスできるようにするために、Managed Service for Apache Spark クラスタ VM に接続されています。
詳細については、Cloud Data Fusion のサービス アカウントをご覧ください。
ロギングとモニタリング
Cloud Logging と Cloud Monitoring は、Cloud Data Fusion パイプラインの健全性とパフォーマンスに関する分析情報を取得するために不可欠です。ロギングとモニタリングは、Cloud Data Fusion インスタンスを作成するときにのみ有効にします。
ロギングとモニタリングを有効にすると、ログビューアページの Google Cloud コンソールで Cloud Data Fusion パイプライン ログを表示できます。
Monitoring には、Cloud Data Fusion 用の組み込みダッシュボードが用意されています。特定の指標をモニタリングするカスタム ダッシュボードを作成することもできます。
Knowledge Catalog とのリネージ統合
Cloud Data Fusion は、リネージ用の Knowledge Catalog との統合を提供します。詳細については、Knowledge Catalog でリネージを表示するをご覧ください。
暗号化
顧客管理の暗号鍵（CMEK）を使用すると、Cloud Key Management Service で管理可能な鍵で保存データを暗号化できます。CMEK では、ユーザーは Google Cloud テナント プロジェクトの内部リソースに書き込まれたデータと、Cloud Data Fusion パイプラインによって書き込まれたデータを管理できます。詳細については、顧客管理のデータ暗号化をご覧ください。
ロールベース アクセス制御（RBAC）で権限を管理する
Cloud Data Fusion では、Identity and Access Management（IAM）を使用して制御できます。
Cloud Data Fusion: Studio オペレーションで実行されるアクションに対するきめ細かい権限を付与するには、RBAC を使用します。詳細については、RABC の概要をご覧ください。
バージョン アップグレード
Cloud Data Fusion にはバージョンがあります。Cloud Data Fusion コンソールでインスタンスを新しいバージョンにアップグレードできます。詳細については、Cloud Data Fusion のバージョニングをご覧ください。
次のステップ
- Cloud Data Fusion について学ぶ。