Gérer les jobs de connecteur

Aperçu

Cette fonctionnalité est soumise aux "Conditions des offres de pré-DG" de la section "Conditions générales du service" des Conditions spécifiques du service. Les fonctionnalités pré-DG sont disponibles "en l'état" et peuvent avoir une prise en charge limitée. Pour en savoir plus, consultez les descriptions des étapes de lancement.

Ce document explique comment afficher, mettre à jour et supprimer les jobs de connecteur Knowledge Catalog (anciennement Dataplex Universal Catalog) utilisés pour l'importation de métadonnées.

Avant de commencer

Pour gérer les jobs de connecteur, vous avez besoin des rôles IAM appropriés. Pour en savoir plus, consultez Rôles IAM.

• Pour afficher les jobs et l'historique des exécutions :
  • Utilisateur BigQuery (roles/bigquery.user)
  • Lecteur Dataplex (roles/dataplex.viewer)
• Pour modifier, supprimer ou déclencher manuellement des tâches :
  • Administrateur BigQuery (roles/bigquery.admin)
  • Administrateur Dataplex (roles/dataplex.admin) ou Éditeur Dataplex (roles/dataplex.editor)

Vous devez activer le service de transfert de données BigQuery.

De plus, vous devez accorder à l'agent de service de transfert de données BigQuery ([e-mail]) l'autorisation dataplex.entryGroups.import ou le rôle Importateur de groupes d'entrées Dataplex (roles/dataplex.entryGroupImporter). Il peut être accordé au niveau du projet ou du groupe d'entrées.

Afficher les tâches du connecteur

1. Dans la console Google Cloud , accédez à la page Knowledge Catalog.

   Accéder à Knowledge Catalog

2. Dans le menu de navigation, dans la section Gérer, cliquez sur Connecteurs. La page Connecteurs liste tous les jobs d'importation de métadonnées de votre projet.

3. Pour afficher les détails, l'historique d'exécution ou la configuration d'un job spécifique, cliquez sur son nom à afficher dans la liste.

Afficher l'historique d'exécution et les journaux des jobs

Pour n'importe quel job de connecteur, vous pouvez afficher l'historique de ses exécutions, y compris celles qui ont réussi et celles qui ont échoué. Les exécutions de jobs datant de plus de 90 jours sont automatiquement supprimées.

1. Sur la page Connecteurs, cliquez sur le nom à afficher du job que vous souhaitez consulter.
2. Cliquez sur l'onglet Historique d'exécution. Cet onglet affiche les exécutions de jobs récentes.
3. Pour afficher les journaux d'une exécution spécifique, recherchez-la dans la liste, puis cliquez sur Afficher les détails.

Journalisation et surveillance

Les connecteurs de métadonnées Knowledge Catalog exportent les journaux et les métriques vers Cloud Monitoring et Cloud Logging afin d'offrir une observabilité sur vos configurations d'importation. Vous pouvez utiliser Monitoring pour configurer des tableaux de bord afin de surveiller les configurations d'importation de métadonnées, d'évaluer les performances d'exécution et d'afficher les messages d'erreur pour résoudre les échecs d'exécution. Vous pouvez utiliser Logging pour afficher les journaux liés à une exécution ou à une configuration.

Mettre à jour un job de connecteur

Vous pouvez modifier la configuration d'un job existant, y compris sa planification, son groupe d'entrées de destination, ses paramètres de notification et les objets sources à importer.

1. Sur la page Connecteurs, cliquez sur le nom à afficher du job que vous souhaitez mettre à jour.
2. Cliquez sur Modifier.
3. Modifiez la configuration du job si nécessaire.
4. Cliquez sur Enregistrer.

Désactiver ou activer un job de connecteur

Lorsque vous désactivez un job, son nom est mis à jour avec l'état disabled et aucune nouvelle exécution de job n'est planifiée. Toutes les exécutions déjà en cours sont terminées. La désactivation d'un job ne supprime pas les métadonnées déjà importées dans Knowledge Catalog.

1. Sur la page Connecteurs, recherchez le job que vous souhaitez désactiver ou activer.
2. Cliquez sur Actions, puis sélectionnez Désactiver ou Activer.

Supprimer un job de connecteur

Lorsque vous supprimez un job, aucune nouvelle exécution n'est planifiée et toutes les exécutions en cours sont arrêtées. La suppression d'un job n'entraîne pas la suppression des métadonnées déjà importées dans Knowledge Catalog.

1. Sur la page Connecteurs, recherchez le job que vous souhaitez supprimer.
2. Cliquez sur Actions, puis sélectionnez Supprimer.
3. Pour confirmer, saisissez delete, puis cliquez sur Supprimer.

Déclencher manuellement un job

Vous pouvez démarrer une exécution de job en dehors de sa planification habituelle. On parle parfois de remplissage.

1. Sur la page Connecteurs, cliquez sur le nom à afficher du job que vous souhaitez exécuter.

2. Cliquez sur Exécuter le transfert maintenant, puis sélectionnez Exécuter un transfert ponctuel.

   Remarque : Les jobs de connecteur Knowledge Catalog n'acceptent que les remplacements complets des métadonnées pour chaque exécution.