Mit einer öffentlichen Cloud Data Fusion-Instanz können Sie Datenintegrationspipelines erstellen und verwalten, die eine Verbindung zu öffentlich zugänglichen Endpunkten herstellen. Bei diesem Standardinstanztyp wird das Standard-VPC-Netzwerk Ihres Projekts verwendet, um Ausführungscluster auszuführen und über das öffentliche Internet eine Verbindung zu externen Endpunkten herzustellen.
Hinweis
- Aktivieren Sie die Cloud Data Fusion API.
- Zum Erstellen von Cloud Data Fusion-Instanzen ist die folgende Berechtigung erforderlich:
instances.create. Weitere Informationen finden Sie unter Zugriffssteuerung. - Cloud Data Fusion-Instanzen müssen als Compute Engine-Standarddienstkonto ausgeführt werden. Informationen zu den verfügbaren Typen und Rollen finden Sie unter Dienstkonten.
- Standardmäßig führt Cloud Data Fusion Pipelines mit einem Managed Service for Apache Spark-Cluster in Ihrem Projekt aus. Prüfen Sie, ob Ihr Projekt die Netzwerkanforderungen für Managed Service for Apache Spark erfüllt.
- Neue Projekte beginnen mit einem Standardnetzwerk. Das Standardnetzwerk ist mit der Firewallregel default-allow-ssh vorkonfiguriert, die eingehende Verbindungen über TCP-Port 22 von jeder Quelle zu jeder Instanz im Netzwerk zulässt. Wenn diese Regel zum Zulassen von eingehendem Traffic auf TCP-Port 22 in Versionen vor 6.2.0 nicht im Netzwerk Ihrer Cloud Data Fusion-Instanz vorhanden ist, müssen Sie diese Regel erstellen.
Instanz erstellen
Console
Wenn die API aktiviert ist, wird im Abschnitt „Cloud Data Fusion“ in der Google Cloud Console die Seite Instanzen angezeigt. Dort können Sie Ihre Cloud Data Fusion-Instanzen erstellen und verwalten.
- Rufen Sie in der Console die Seite „Cloud Data Fusion“ auf.
- Klicken Sie auf Instanzen und dann auf Instanz erstellen.
- Geben Sie einen Instanznamen ein.
- Geben Sie eine Beschreibung für Ihre Instanz ein.
- Geben Sie die Region an, in der die Instanz erstellt werden soll.
- Geben Sie die Version von Cloud Data Fusion an.
- Wählen Sie eine Version aus. Die Standardeinstellung ist Basic.
- Optional: Klicken Sie auf Beschleuniger hinzufügen, um Beschleuniger für Ihre Instanz auszuwählen.
- Geben Sie das Managed Service for Apache Spark-Dienstkonto an, das für die Ausführung Ihrer Cloud Data Fusion-Pipeline in Managed Service for Apache Spark verwendet werden soll. Die Standardeinstellung ist das Compute Engine-Konto. Sorgen Sie unabhängig von der Version dafür, dass ein Dienstkonto die entsprechenden Rollen für die Identitäts- und Zugriffsverwaltung hat. Weitere Informationen finden Sie unter Berechtigungen für Dienstkontonutzer erteilen.
Optional: Geben Sie erweiterte Optionen an. Wenn Sie nichts angeben, werden die folgenden Standardwerte verwendet:
Kategorie Einstellung Beschreibung Standard Private IP Interne IP-Adressen aktivieren Erstellen Sie die Cloud Data Fusion-Instanz mit einer internen IP-Adresse. Deaktiviert Erweitertes Monitoring und Logging Managed Service for Apache Spark Cloud Logging aktivieren
Cloud Monitoring für Managed Service for Apache Spark aktivieren
Erweiterte Pipeline-Logs in Cloud Logging ansehen Deaktiviert Einbindung der Datenherkunft in Knowledge Catalog Einbindung in Knowledge Catalog-Datenherkunft aktivieren oder deaktivieren Herkunft in Knowledge Catalog ansehen Deaktiviert Verschlüsselung Kundenverwalteten Verschlüsselungsschlüssel (CMEK) verwenden Verwenden Sie in Version 6.5 und höher die rollenbasierte Zugriffssteuerung. Deaktiviert Labels Ein Schlüssel/Wert-Paar Die Ressourcenlabels für die Instanz, die zum Annotieren aller zugehörigen zugrunde liegenden Ressourcen wie Compute Engine-VMs verwendet werden sollen. Labelschlüssel und Labelwerte dürfen nur Buchstaben, Ziffern, Bindestriche und Unterstriche enthalten. Labelschlüssel müssen mit einem Buchstaben oder einer Ziffer beginnen. Keine Wartung Wartungsfenster aktivieren Legen Sie das Zeitfenster fest, in dem Cloud Data Fusion Wartungsvorgänge für die Instanz ausführen kann. Weitere Informationen finden Sie unter Wartungsfenster konfigurieren. Deaktiviert Klicken Sie auf Erstellen. Es kann bis zu 30 Minuten dauern, bis die Instanz erstellt ist.
Während Cloud Data Fusion die Instanz erstellt, wird neben dem Instanznamen auf der Seite Instanzen ein Radsymbol angezeigt, das den Fortschritt angibt. Nachdem der Vorgang abgeschlossen ist, wird es zu einem grünen Häkchen. Dies zeigt an, dass Sie die Instanz verwenden können.
API
Instanz erstellen:
Wenn Sie eine Cloud Data Fusion-Instanz mit der Cloud Data Fusion REST API erstellen möchten, erstellen Sie eine instances.create API-Anfrage, indem Sie die Instance-Ressource mit Ihren Konfigurationsinformationen ausfüllen.
Nächste Schritte
- Weitere Informationen über Cloud Data Fusion
- Anleitung durcharbeiten