GcsSource

Cloud Storage-Speicherort für Eingabeinhalte.

JSON-Darstellung 
{
  "inputUris": [
    string
  ],
  "dataSchema": string
}
Felder
inputUris[]

string

Erforderlich. Cloud Storage-URIs für Eingabedateien. Jeder URI kann bis zu 2.000 Zeichen lang sein. URIs können dem vollständigen Objektpfad entsprechen (z. B. gs://bucket/directory/object.json) oder einem Muster, das mit einer oder mehreren Dateien übereinstimmt, z. B. gs://bucket/directory/*.json.

Eine Anfrage kann maximal 100 Dateien enthalten (oder 100.000 Dateien, wenn dataSchema gleich content ist). Jede Datei darf maximal 2 GB groß sein (oder 100 MB, wenn dataSchema gleich content ist).
dataSchema

string

Das Schema, das beim Parsen der Daten aus der Quelle verwendet werden soll.

Unterstützte Werte für den Dokumentimport:

  • document (Standard): Ein JSON-Document pro Zeile. Jedes Dokument muss eine gültige Document.id haben.
  • content: Unstrukturierte Daten (z.B. PDF, HTML). Jede Datei, die mit inputUris übereinstimmt, wird zu einem Dokument. Die ID wird auf die ersten 128 Bit von SHA256(URI) gesetzt, die als Hexadezimalstring codiert sind.
  • custom: Ein benutzerdefiniertes JSON-Objekt pro Zeile in einem beliebigen Format, das der definierten Schema des Datenspeichers entspricht. Diese Funktion kann nur für die vertikale Branche „GENERIC Data Store“ verwendet werden.
  • csv: Eine CSV-Datei mit einem Header, der der definierten Schema des Datenspeichers entspricht. Jeder Eintrag nach dem Header wird als Dokument importiert. Diese Funktion kann nur für die vertikale Branche GENERIC Data Store verwendet werden.

Unterstützte Werte für den Import von Nutzerereignissen:

  • user_event (Standard): Ein JSON-UserEvent pro Zeile.