デプロイ後のステップ

このページでは、Cortex Framework のデプロイ後のステップについて説明します。データ パイプラインを実行し、結果を検証します。

デプロイ後、すべての変換テンプレートと構成がコンパイルされ、ターゲットの Dataform リポジトリにデプロイされます。ただし、BigQuery でテーブルとビューを具体化するには、まず Dataform パイプライン アクションを実行する必要があります。

Dataform で変換を実行する

パイプラインを実行すると、未加工データを関連するデータ基盤レイヤとデータ プロダクト レイヤに変換するロジックが開始され、すぐにビジネスで使用できるようになります。

Google Cloud コンソールでアクションを手動で実行して検証することも、本番環境の定期的なスケジュールを構成することもできます。

検証のための手動実行

Dataform ワークスペース内でパイプライン全体の手動検証を実行する手順は次のとおりです。

  1. コンソール Google Cloud で、[Dataform] ページに移動します。
  2. プロジェクトのプルダウンから正しい Google Cloud プロジェクトが選択されていることを確認します。
  3. デプロイ時に作成されたリポジトリの名前（cortex など）をクリックします。
  4. ワークスペース名（cortex など）をクリックします。
  5. [実行を開始] をクリックします。
  6. [操作を実行] をクリックします。
  7. [すべてのアクション] を選択します。特定のタグまたはアクションを選択して、変換の主要なサブセットを選択することもできます。
  8. [実行を開始] をクリックします。

実行の成功を確認する

進行状況をモニタリングし、パイプラインが正常に完了したかどうかを確認する手順は次のとおりです。

  1. [Executions] タブをクリックして、実行履歴を表示します。
  2. ステータスが [Completed successfully] であることを確認します。
  3. 実行リンクをクリックして、特定のアクションの詳細、コンパイル エラー、実行タイミングを確認します。

BigQuery でデータアセットを確認する

Dataform パイプラインが正常に実行されたら、生成されたデータセットを確認し、BigQuery で具体化されたテーブルを確認します。

  1. コンソール Google Cloud で [BigQuery] に移動します。
  2. config.yaml ファイルで構成されたターゲット データセット（モジュールの dataTargetId で参照される data.targets エントリの datasetId で識別されるデータセットなど）を見つけます。たとえば、テンプレート構成では、次のようになります。
    • データ基盤レイヤ: 基盤ターゲット ID（デフォルトでは cortex7_sap_data_foundation として構成）に一致するデータセットを探します。
    • データ プロダクト レイヤ: プロダクト ターゲット ID（デフォルトでは cortex7_data_products として構成）に一致するデータセットを探します。
  3. テーブルをプレビューし、サンプルクエリを実行して、想定されるレコードが入力されていることを確認します。

次のステップ

データシステムが稼働したら、次の方法について学習します。

  • Knowledge Catalog にデータ プロダクトを登録する: 登録プロセスを自動化するには、Knowledge Catalog の統合] (/cortex/docs/knowledge-catalog) ドキュメントをご覧ください。
  • データモデルを拡張する: スキーマをカスタマイズしたり、新しいモジュールをインスタンス化したりするには、拡張性ガイドをご覧ください。
  • 新しいデータ プロダクトを構築またはカスタマイズする: 開始するには、データ プロダクト構築のエージェント スキル ドキュメントをご覧ください。