Dataflow SQL

Dataflow unterstützt Dataflow SQL nicht mehr. Dies ist eine funktionsgefährdende Änderung.

  • Seit dem 31. Juli 2024 können Sie in derGoogle Cloud -Konsole nicht mehr auf Dataflow SQL zugreifen.
  • Ab dem 31. Januar 2025 können Sie Dataflow SQL nicht mehr in der Google Cloud CLI verwenden.

Ersatz: Beam SQL

Mit Beam SQL können Sie begrenzte und unbegrenzte PCollections mit SQL-Anweisungen abfragen. Wenn Sie in einem Apache Beam-Notebook arbeiten, können Sie die benutzerdefinierte IPython-Magie beam_sql verwenden, um die Pipelineentwicklung zu beschleunigen.

Beam SQL bietet ähnliche Funktionen wie Dataflow SQL. Hier werden SQL-Anweisungen verwendet, um PCollections abzufragen.

Migration

Wir empfehlen Ihnen, so bald wie möglich mit der Migration Ihrer Dataflow SQL-Abfrage zu Beam SQL zu beginnen.

Die Umstellung auf Beam SQL ist eine wichtige Änderung, die sich auf alle Dataflow SQL-Jobs oder -Abfragen auswirkt. Sie müssen diese Jobs und Abfragen neu erstellen.

Nach dieser Änderung können Sie keine neuen Dataflow SQL-Jobs mehr erstellen. Diese Änderung hat jedoch keine Auswirkungen auf Dataflow SQL-Jobs, die bereits ausgeführt werden.

Informationen zum Erstellen von Abfragen in Beam SQL finden Sie unter Beam SQL und beam_sql-Magie und Beam SQL – Übersicht.