Was ist der BigQuery Data Transfer Service?

BigQuery Data Transfer Service automatisiert die Datenübertragung in BigQuery auf geplanter, verwalteter Basis. Das Analyseteam kann den Grundstein für ein BigQuery-Data Warehouse legen, ohne eine einzige Codezeile schreiben zu müssen.

Sie haben folgende Möglichkeiten, auf BigQuery Data Transfer Service zuzugreifen:

Nachdem Sie eine Datenübertragung konfiguriert haben, werden Daten von BigQuery Data Transfer Service automatisch regelmäßig in BigQuery geladen. Sie können auch Daten-Backfills initiieren, um eine Wiederherstellung nach Ausfällen oder Lücken zu erreichen. Sie können mit BigQuery Data Transfer Service keine Daten aus BigQuery übertragen.

Zusätzlich zum Laden von Daten in BigQuery wird BigQuery Data Transfer Service für zwei BigQuery-Vorgänge verwendet: Dataset-Kopien und geplante Abfragen.

Unterstützte Datenquellen

Der BigQuery Data Transfer Service unterstützt das Laden von Daten aus den folgenden Datenquellen:

Überlegungen zum SLO für die Datenbereitstellung

Das SLO für die Datenbereitstellung gilt für automatisch geplante Datenübertragungen mit dem BigQuery Data Transfer Service aus Quellen innerhalb von Google Cloud.

Bei Datenübertragungen mit Drittanbieter- oder Nicht-Google Cloud -Quellen können Dienstausfälle bei diesen Quellen die Leistung von BigQuery Data Transfer Service beeinträchtigen. Daher gilt das SLO für die Datenübermittlung nicht für BigQuery Data Transfer Service-Datenübertragungen aus Nicht-Google Cloud -Quellen.

Unterstützte Regionen

Ebenso wie BigQuery ist auch BigQuery Data Transfer Service eine multiregionale Ressource mit vielen zusätzlichen einzelnen verfügbaren Regionen.

Der Standort eines BigQuery-Datasets wird angegeben, wenn Sie ein Ziel-Dataset erstellen, um die vom BigQuery Data Transfer Service übertragenen Daten zu speichern. Wenn Sie eine Übertragung einrichten, wird für die Übertragungskonfiguration derselbe Standort wie für das Ziel-Dataset festgelegt. Daten werden von BigQuery Data Transfer Service am selben Speicherort wie das Ziel-Dataset verarbeitet und bereitgestellt.

Der BigQuery Data Transfer Service unterstützt Datenübertragungen aus jeder Region, in der Ihre Daten gespeichert sind, an jeden Speicherort, an dem sich Ihr Ziel-Dataset befindet.

Ausführliche Informationen zu Übertragungen und zur Regionskompatibilität für den BigQuery Data Transfer Service finden Sie unter Dataset-Standorte und Übertragungen. Für BigQuery unterstützte Regionen finden Sie unter Dataset-Standorte.

Reservierungs-Slots mit Datenübertragungen verwenden

Für Jobs, die vom BigQuery Data Transfer Service ausgelöst werden, werden nur Reservierungsslots verwendet, wenn dem Projekt, Ordner oder der Organisation eine Reservierung mit einem der folgenden Jobtypen zugewiesen ist:

  • Abfragejobs mit QUERY
  • Ladejobs mit PIPELINE

Für Jobs, mit denen Datasets kopiert werden, werden keine Reservierungsslots verwendet.

Preise

Die Preise für BigQuery Data Transfer Service finden Sie auf der Seite "Preise".

Nach der Übertragung von Daten in BigQuery gelten die Standardpreise für Speicher und Abfragen in BigQuery.

Kontingente

Informationen zu den Kontingenten für BigQuery Data Transfer Service finden Sie auf der Seite Kontingente und Limits.

Nächste Schritte

In der Dokumentation zu Ihrer Datenquelle erfahren sie mehr über das Erstellen einer Übertragung.