Liste des composants du pipeline Google Cloud

Les composants du pipelineGoogle Cloud sont publiés en deux étapes :

• Disponibilité générale (v1.0 et versions ultérieures)

• Aperçu

Pour en savoir plus, consultez les descriptions des étapes de lancement.

Composants en disponibilité générale (version 1.0 et versions ultérieures)

Les composants de pipeline Google Cloud en disponibilité générale (DG) sont disponibles dans l'espace de noms v1 du SDK de composants de pipeline Google Cloud . Ces composants disposent d'une interface stable et sont prêts à être utilisés dans un environnement de production.

Composants AutoML

Composants de prévision AutoML

Le SDK Google Cloud inclut les opérateurs suivants liés aux prévisions AutoML :

• ProphetTrainerOp

Composants tabulaires d'AutoML

Le SDK Google Cloud inclut les opérateurs suivants liés aux données tabulaires AutoML :

• CvTrainerOp
• EnsembleOp
• FinalizerOp
• InfraValidatorOp
• SplitMaterializedDataOp
• Stage1TunerOp
• StatsAndExampleGenOp
• TrainingConfiguratorAndValidatorOp
• TransformOp

Composants de jobs d'entraînement AutoML

Le SDK Google Cloud inclut les opérateurs suivants liés aux jobs d'entraînement AutoML :

• AutoMLForecastingTrainingJobRunOp
• AutoMLImageTrainingJobRunOp
• AutoMLTabularTrainingJobRunOp
• AutoMLTextTrainingJobRunOp

Composants de prédiction par lot

Le SDK Google Cloud comprend les opérateurs suivants liés à la prédiction par lot :

• ModelBatchPredictOp

Composants BigQuery ML

Le SDK Google Cloud comprend les opérateurs suivants pour la création et l'exécution des modèles de machine learning à l'aide de BigQuery :

• BigqueryCreateModelJobOp
• BigqueryDetectAnomaliesModelJobOp
• BigqueryDropModelJobOp
• BigqueryEvaluateModelJobOp
• BigqueryExplainForecastModelJobOp
• BigqueryExplainPredictModelJobOp
• BigqueryExportModelJobOp
• BigqueryForecastModelJobOp
• BigqueryMLAdvancedWeightsJobOp
• BigqueryMLArimaCoefficientsJobOp
• BigqueryMLArimaEvaluateJobOp
• BigqueryMLCentroidsJobOp
• BigqueryMLConfusionMatrixJobOp
• BigqueryMLFeatureImportanceJobOp
• BigqueryMLFeatureInfoJobOp
• BigqueryMLGlobalExplainJobOp
• BigqueryMLPrincipalComponentInfoJobOp
• BigqueryMLPrincipalComponentsJobOp
• BigqueryMLRecommendJobOp
• BigqueryMLReconstructionLossJobOp
• BigqueryMLRocCurveJobOp
• BigqueryMLTrainingInfoJobOp
• BigqueryMLTrialInfoJobOp
• BigqueryMLWeightsJobOp
• BigqueryPredictModelJobOp
• BigqueryQueryJobOp

Composants de jobs personnalisés

Le SDK Google Cloud inclut les opérateurs suivants pour exécuter les composants KFP en tant que jobs d'entraînement personnalisé Vertex AI :

• CustomTrainingJobOp

Composants de Dataflow

Le SDK Google Cloud comprend les opérateurs suivants liés à Dataflow :

• DataflowFlexTemplateJobOp
• DataflowPythonJobOp

Google Cloud Composants de Serverless pour Apache Spark

Le SDK Google Cloud comprend les opérateurs suivants liés à Google Cloud Serverless pour Apache Spark :

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Composants d'ensembles de données

Le SDK Google Cloud inclut les opérateurs suivants pour la gestion des ressources dataset AutoML :

• GetVertexDatasetOp
• ImageDatasetCreateOp
• ImageDatasetExportDataOp
• ImageDatasetImportDataOp
• TabularDatasetCreateOp
• TabularDatasetExportDataOp
• TextDatasetCreateOp
• TextDatasetExportDataOp
• TextDatasetImportDataOp
• TimeSeriesDatasetCreateOp
• TimeSeriesDatasetExportDataOp

Composants de points de terminaison

Le SDK Google Cloud comprend les opérateurs suivants liés aux points de terminaison de mise en service du modèle :

• EndpointCreateOp
• EndpointDeleteOp
• ModelDeployOp
• ModelUndeployOp

Composants de prévision

Le SDK Google Cloud comprend les opérateurs suivants liés aux prévisions :

• ForecastingPrepareDataForTrainOp
• ForecastingPreprocessingOp
• ForecastingValidationOp

Composants de réglage des hyperparamètres

Le SDK Google Cloud comprend les opérateurs suivants liés aux jobs de réglage des hyperparamètres :

• HyperparameterTuningJobRunOp

Composants de modèles

Le SDK Google Cloud inclut les opérateurs suivants pour gérer les modèles via Vertex AI Model Registry :

• ModelDeleteOp
• ModelExportOp
• ModelUploadOp

Composants d'évaluation de modèle

Le SDK Google Cloud comprend les opérateurs suivants liés à l'évaluation des modèles :

• ModelEvaluationClassificationOp
• ModelEvaluationForecastingOp
• ModelEvaluationRegressionOp

Composants de notification par e-mail

Le SDK Google Cloud comprend les opérateurs suivants pour la gestion des notifications par e-mail :

• VertexNotificationEmailOp

Composants liés à l'attente de ressources

Le SDK Google Cloud comprend l'opérateur suivant lié à l'attente de création de ressource :

• WaitGcpResourcesOp

Composants en preview

Preview

Cette fonctionnalité est soumise(s) aux "Conditions des offres de pré-DG" de la section "Conditions générales du service" des Conditions spécifiques du service. Les fonctionnalités de pré-DG sont disponibles "en l'état" et peuvent avoir une prise en charge limitée. Pour en savoir plus, consultez les descriptions des étapes de lancement.

Les composants de pipelineGoogle Cloud en phase preview sont disponibles dans l'espace de noms preview du SDK des composants de pipeline Google Cloud .

Composants AutoML

Composants de prévision AutoML

Le SDK Google Cloud comprend les opérateurs en preview suivants liés aux prévisions AutoML :

• ForecastingEnsembleOp
• ForecastingStage1TunerOp
• ForecastingStage2TunerOp

Composants tabulaires d'AutoML

Le SDK Google Cloud inclut les opérateurs en preview suivants liés aux données tabulaires AutoML :

• AutoFeatureEngineeringOp
• DistillationStageFeatureTransformEngineOp
• FeatureSelectionOp
• FeatureTransformEngineOp
• TabNetHyperparameterTuningJobOp
• TabNetTrainerOp
• WideAndDeepHyperparameterTuningJobOp
• WideAndDeepTrainerOp
• XGBoostHyperparameterTuningJobOp
• XGBoostTrainerOp

Composants de jobs personnalisés

Le SDK Google Cloud inclut les opérateurs en preview suivants pour exécuter des composants KFP en tant que jobs d'entraînement personnalisé Vertex AI :

• CustomTrainingJobOp

Composants de Dataflow

Le SDK Google Cloud comprend les opérateurs en preview suivants liés à Dataflow :

• DataflowFlexTemplateJobOp

Composants de grand modèle de langage (LLM)

Le SDK Google Cloud comprend les opérateurs en preview suivants liés aux grands modèles de langage :

• infer_pipeline
• rlhf_pipeline

Composants d'évaluation de modèle

Le SDK Google Cloud comprend les opérateurs en preview suivants liés à l'évaluation des modèles :

• DetectDataBiasOp
• DetectModelBiasOp
• ModelEvaluationFeatureAttributionOp

Étapes suivantes

• Consultez les pages de référence suivantes pour obtenir des informations spécifiques sur les composants du pipeline Google Cloud  :

  • Composants de Dataflow

  • Composants deGoogle Cloud Serverless pour Apache Spark

  • Composants de CustomJob

  • Composant de prédiction par lot

  • Composants de modèles et de points de terminaison

  • Composant d'évaluation du modèle

  • Composants AutoML Vertex AI (aiplatform)