Questions fréquentes sur Knowledge Catalog

Ce document répond aux questions fréquentes sur Google CloudKnowledge Catalog (anciennement Dataplex Universal Catalog).

Pour en savoir plus sur Knowledge Catalog, consultez la présentation de Knowledge Catalog.

Concepts généraux

Consultez les questions fréquentes sur les fonctionnalités de Knowledge Catalog.

Qu'est-ce que Knowledge Catalog ?

Knowledge Catalog est une solution de gouvernance intelligente pour les composants de données et d'IA dans Google Cloud. Il fournit un inventaire centralisé dans lequel vous pouvez découvrir, gérer et gouverner vos données sur des sources de données Google Cloud telles que BigQuery, Cloud Storage, Pub/Sub et Spanner.

Knowledge Catalog utilise l'IA pour automatiser la découverte de données, l'enrichissement des métadonnées et la qualité des données. Grâce à son catalogue de données géré, Knowledge Catalog fournit l'ancrage essentiel dont les agents IA ont besoin pour générer du contenu de haute qualité.

À quoi sert Knowledge Catalog ?

Knowledge Catalog résout le problème du "démarrage à froid des données", c'est-à-dire le temps perdu à essayer de trouver, de comprendre et de faire confiance aux données avant de pouvoir les utiliser. Voici ses principales utilisations :

  • Découverte accélérée des données : au lieu de naviguer dans des silos organisationnels complexes pour localiser des données, vous pouvez utiliser la recherche en langage naturel (par exemple, "Affiche-moi les données les plus récentes sur la perte de clients") pour trouver instantanément des éléments dans les ressourcesGoogle Cloud , ce qui augmente la productivité des consommateurs de données.

  • Ancrage des agents IA : il sert de "source de vérité" pour l'IA générative ou l'ADK. En associant les données physiques aux définitions métier, il garantit que les agents IA (comme ceux basés sur Vertex AI) utilisent des données de haute qualité, ce qui réduit considérablement les hallucinations de l'IA et améliore la confiance dans les insights générés par l'IA.

  • Gouvernance automatisée des données : il analyse automatiquement vos données pour identifier les informations sensibles (c'est-à-dire les informations permettant d'identifier personnellement l'utilisateur), suit l'origine des données (traçabilité) et surveille leur exactitude (qualité automatique des données). Ces fonctionnalités permettent d'améliorer la confiance, la sécurité et la conformité des données en réduisant les efforts manuels.

  • Découvrir les "données sombres" : il peut analyser des fichiers non structurés (par exemple, des PDF ou des images dans Cloud Storage), en extraire les informations et les rendre consultables et interrogeables dans BigQuery, ce qui vous permet d'obtenir des insights à partir de données auparavant inaccessibles.

Pour commencer à utiliser ces scénarios, consultez Cas d'utilisation de Knowledge Catalog.

Quels types de métadonnées Knowledge Catalog stocke-t-il ?

Knowledge Catalog stocke trois types de métadonnées :

  • Métadonnées techniques : schémas, noms de tables et propriétés système collectés automatiquement.

  • Métadonnées métier : contexte défini par l'utilisateur, tel que les descriptions d'entreprise, les termes du glossaire et la propriété.

  • Métadonnées d'exécution : informations sur la traçabilité des données, les scores de qualité des données et les statistiques de profilage des données.

Facturation des insights sur les données

Consultez les questions fréquentes sur la facturation basée sur les jetons, la mesure de l'utilisation et les contrôles administratifs de la fonctionnalité d'insights sur les données dans Knowledge Catalog.

Quand commencerai-je à être facturé pour l'utilisation des insights sur les données ?

La facturation des insights sur les données commencera le 27 octobre 2026.

Comment l'utilisation des insights sur les données est-elle facturée ?

L'utilisation est mesurée en jetons de données. Les jetons de données représentent les unités de base du texte et des métadonnées traitées par le modèle Gemini. Ces jetons sont divisés en deux catégories :

  • Jetons d'entrée : contexte, instructions et historique envoyés au modèle.
  • Jetons de sortie : descriptions, relations et requêtes en langage naturel générées par le modèle.

Pour en savoir plus, consultez Tarifs de l'agent Data Cloud.

Les comptes de service bénéficient-ils d'un quota sans frais pour les insights sur les données ?

Non. Les comptes de service ne bénéficient pas d'un quota sans frais par utilisateur. Toutefois, leur utilisation est mesurée de la même manière que celle des utilisateurs standards.

Comment puis-je empêcher la facturation automatique des insights sur les données ?

Pour éviter que des frais ne vous soient facturés, vérifiez vos analyses en cours et arrêtez d'en déclencher de nouvelles. Les administrateurs peuvent également désactiver la fonctionnalité d'insights sur les données en désactivant l'API Dataplex dans le projet concerné.

Comment savoir combien me seront facturés les insights sur les données ?

Google Cloud fournit une mesure pour les jetons de données. Cette mesure permet aux administrateurs et aux propriétaires d'agents de surveiller leur consommation de jetons. Pour suivre la consommation de jetons pour les jobs d'analyse des insights sur les données et créer des tableaux de bord personnalisés dans Cloud Monitoring, consultez Surveiller l'utilisation des jetons d'insights sur les données.

Comment contrôler les coûts et définir des limites de jetons pour les insights sur les données ?

Pour gérer les coûts et définir des limites d'utilisation des jetons d'insights sur les données, consultez Quotas et limites pour les insights sur les données.

Que se passe-t-il lorsque les limites de quota d'insights sur les données sont atteintes ?

Knowledge Catalog vérifie les quotas de jetons d'entrée et de sortie avant de lancer une analyse, puis déduit les jetons consommés une fois l'analyse terminée.

Que se passe-t-il pour les analyses déjà en cours lorsque la limite est dépassée ?

Knowledge Catalog ne vérifie le quota qu'au début d'une analyse, et non en cours d'analyse. Si une analyse démarre alors que le quota est encore disponible et que son utilisation de jetons dépasse la limite quotidienne du projet, cette analyse se termine normalement et publie les insights générés. Une fois le rapprochement de facturation post-analyse terminé, Knowledge Catalog marque le bucket de quota quotidien comme épuisé (100 %) pour le reste de la journée.

Que se passe-t-il pour les analyses ultérieures déclenchées après que la limite a été atteinte ?

Une fois le quota quotidien de jetons d'entrée ou de sortie épuisé, Knowledge Catalog bloque immédiatement toute nouvelle analyse d'insights à la demande ou planifiée avant son exécution. Les analyses refusées n'entraînent pas de frais de jeton.

Que vois-je dans la console Google Cloud  ?

Lorsqu'une analyse échoue, car le quota de jetons est dépassé, BigQuery Studio et Knowledge Catalog dans la console Google Cloud affichent le comportement suivant :

  • Sur une table ou un ensemble de données avec des insights existants : la régénération échoue avec la bannière d'erreur intégrée suivante :

    Knowledge Catalog Insights token quota limit exceeded for this project.

    Toutes les descriptions et suggestions de requêtes SQL générées précédemment restent visibles et utilisables.

  • Sur une nouvelle table ou un nouvel ensemble de données sans insights préalables : la génération échoue et affiche la bannière d'erreur de quota dépassé dans l'état vide. Le bouton Générer des insights reste disponible pour réessayer.

Comment puis-je reprendre la génération d'insights sur les données ?

Pour reprendre la génération d'insights sur les données, effectuez l'une des opérations suivantes :

  • Attendre la réinitialisation quotidienne : les compteurs de jetons quotidiens sont automatiquement réinitialisés à 0 à minuit, heure du Pacifique (00:00 PT).
  • Augmentez la limite de quota : un administrateur de projet peut augmenter la limite quotidienne (ou la réinitialiser sur "Illimitée") sur la page Quotas et limites du système de la consoleGoogle Cloud pour reprendre immédiatement la génération d'insights.

Facturation et surveillance des coûts

Consultez les questions fréquentes sur la surveillance et l'attribution des coûts de calcul dans Knowledge Catalog.

Comment surveiller et attribuer les coûts des DCU Knowledge Catalog pour la qualité des données, le profilage des données et la traçabilité des données ?

Les unités de calcul de données (DCU) de calcul DataScan (qualité automatique des données et profilage des données) et de traçabilité des données de Knowledge Catalog s'exécutent sur un calcul sans serveur dans l'infrastructure gérée par Google et ne publient pas de métriques de séries temporelles sous dataplex.googleapis.com/* dans Cloud Monitoring.

Pour surveiller, attribuer et recevoir des alertes sur les coûts des DCU Knowledge Catalog pour l'ensemble des projets et des analyses, exportez vos données Cloud Billing vers BigQuery et interrogez les libellés système associés aux enregistrements de facturation Knowledge Catalog :

  • Pour les analyses de la qualité des données et les analyses de profilage des données, utilisez les étiquettes goog-dataplex-datascan-* (telles que goog-dataplex-datascan-id, goog-dataplex-datascan-data-source-project et goog-dataplex-datascan-data-source-bigquery-table).
  • Pour le traitement de la traçabilité des données, utilisez l'étiquette goog-dataplex-workload-type avec la valeur LINEAGE.

Pour obtenir des définitions détaillées des étiquettes et des exemples de requêtes SQL BigQuery, consultez Surveiller et attribuer les coûts des DCU Knowledge Catalog avec l'exportation Cloud Billing.