Knowledge Catalog (ehemals Dataplex Universal Catalog) erkennt potenzielle Verknüpfungen zwischen Daten-Assets, sodass Sie die zugehörigen Daten und die Art der Beziehung ermitteln können.
Hinweis
Bevor Sie Beziehungen zwischen Daten-Assets ansehen, müssen Sie dafür sorgen, dass Ihnen die erforderlichen Rollen zugewiesen sind.
Erforderliche Rollen
Um Beziehungen zwischen Daten-Assets in Knowledge Catalog aufzurufen, benötigen Sie keine IAM-Rollen, die speziell für Knowledge Catalog gelten.
Knowledge Catalog verwendet Ihre vorhandenen Berechtigungen für die Quellsysteme, in denen sich die Assets befinden, z. B. BigQuery, um zu bestimmen, ob Sie Beziehungen sehen können. Wenn Sie beispielsweise Beziehungen mit einer BigQuery-Tabelle aufrufen möchten, benötigen Sie die Berechtigung bigquery.tables.get.
Wenn Sie keine Berechtigung haben, ein Asset in seinem Quellsystem aufzurufen, werden im Knowledge Catalog-Beziehungsdiagramm alle Beziehungen ausgeblendet, in die dieses Asset einbezogen ist. So wird sichergestellt, dass die Sichtbarkeit von Beziehungen den Sicherheitsgrenzen und Berechtigungen entspricht, die in den Quellsystemen festgelegt sind.
Datenbeziehungen
Datenbeziehungen veranschaulichen, wie Daten-Assets miteinander verbunden sind. Wenn Sie beispielsweise eine Tabelle mit Kundendaten finden, können Sie anhand der Beziehungen zugehörige Tabellen mit Bestellungen oder Support-Tickets ermitteln. Außerdem dienen Beziehungen als strukturelle Orientierungshilfe und liefern Large Language Models wichtigen Kontext. Dadurch generiert die KI präzisere Antworten und formuliert genaue Abfragen, um bestimmte Informationen abzurufen.
Knowledge Catalog ermittelt und speichert automatisch gängige Beziehungen zwischen den Daten-Assets. Die Beziehungsdaten stammen aus verschiedenen Quellen, z. B.:
- Knowledge Catalog-Logs mit Abfrageverlauf, die den Abfrageverlauf kontinuierlich analysieren, um potenzielle
JOIN-Muster zwischen Tabellen zu erkennen. - Dateneinblicke schlagen auf Anfrage Datenbeziehungen vor, indem sie Schemaattribute und Datenüberschneidungen mithilfe von Large Language Models analysieren.
Unterstützte Daten-Assets
Sie können Datenbeziehungen für BigQuery-Tabellen und -Ansichten aufrufen.
Datenbeziehungen ansehen
Wenn Sie Datenbeziehungen für BigQuery-Tabellen und -Ansichten ansehen möchten, verwenden Sie dieGoogle Cloud -Konsole oder die Dataplex API.
Console
So sehen Sie sich Datenbeziehungen für eine Tabelle in BigQuery an:
Rufen Sie in der Google Cloud Console die Seite Suchen im Knowledge Catalog auf.
Suchen Sie nach einer BigQuery-Tabelle, für die Sie Beziehungen aufrufen möchten.
Klicken Sie in den Suchergebnissen auf den Tabellennamen, um die zugehörige Eintragsseite zu öffnen.
Rufen Sie den Tab Beziehungen auf, um die folgenden Informationen zu jeder Datenbeziehung aufzurufen:
- Ziel: Der Name des verbundenen Daten-Assets.
- Beziehung: Die spezifischen Spalten, die zum Verknüpfen der Assets verwendet werden.
- Typ:Die Art des Links. Sowohl häufige Joins als auch Beziehungen, die durch Dateneinblicke ermittelt wurden, werden beispielsweise als
JOINangezeigt. Ursprung:Der Ursprung der Beziehung.
Query historyist der Ursprung für häufige Joins.Data insightsist der Ursprung für Beziehungen, die durch Dateneinblicke erkannt wurden.
Aktion: Eine Beispielabfrage, mit der Sie die Verknüpfung zwischen den Assets ermitteln können.
REST
Erkannte Beziehungen werden in Knowledge Catalog als EntryLinks gespeichert, die eine Beziehung zwischen zwei Daten-Assets (Einträgen) in Knowledge Catalog herstellen. Die Details zur Beziehung, z. B. die verknüpften Spalten und die Beziehungsquelle, werden als Aspekte von EntryLinks gespeichert.
Verwenden Sie die folgenden Methoden, um Datenbeziehungen aufzurufen:
LookupEntryLinksruft alleEntryLinksab, die auf einen bestimmten Dateneintrag als Quelle oder Ziel verweisen, um alle Beziehungen zurückzugeben, die einem bestimmten Eintrag zugeordnet sind.LookupContextbietet einen einzigen Endpunkt, um KI-Agenten mit Kontextmetadaten zu fundieren. Es wird ein prägnantes, vorformatiertes Paket mit Metadaten zurückgegeben, einschließlich zugehöriger Daten-Assets.
Standorte
Sie können Datenbeziehungen an allen BigQuery-Standorten verwenden.
Beschränkungen
- Knowledge Catalog analysiert eine Stichprobe des Abfrageverlaufs, um Beziehungen zu ermitteln. Das bedeutet, dass einige Abfragen möglicherweise nicht zum Auffinden von Links führen.
- Es kann bis zu 72 Stunden nach der Ausführung der Abfrage dauern, bis Beziehungen ermittelt werden.