Versões do ambiente de execução do Google Cloud Serverless para Apache Spark

Este documento lista as versões de ambiente de execução do Serverless para Apache Spark compatíveis e incompatíveis e descreve as características delas.

Local do nó de ambiente de execução

Nesta seção, descrevemos como as Google Cloud versões de tempo de execução do Serverless para Apache Spark alocam nós em uma região para executar cargas de trabalho em lote e sessões interativas.

  • Versões de tempo de execução 3.0+: para ajudar na capacidade de obtenção e evitar falta de estoque zonal, o Serverless para Apache Spark pode alocar nós para executar uma carga de trabalho em lote ou uma sessão interativa em várias zonas na região da carga de trabalho ou da sessão. Não há custo adicional para o tráfego de rede entre zonas entre nós em uma região.

    Versões de tempo de execução anteriores a 3.0, o Serverless para Apache Spark aloca nós para executar uma carga de trabalho em lote ou uma sessão interativa em uma única zona dentro da região da carga de trabalho ou da sessão.

Disponibilidade e suporte do ambiente de execução

  • As versões de ambiente de execução do LTS (Long-Time-Support) do Serverless para Apache Spark têm suporte por 30 meses. As versões de ambiente de execução não LTS do Serverless para Apache Spark têm suporte por 12 meses.

  • As versões do ambiente de execução do Serverless para Apache Spark continuam disponíveis por dois anos após a data de fim do suporte.

  • Não há suporte para fixação de versão subalternativa do ambiente de execução.

Versões de ambiente de execução sem servidor para Apache Spark compatíveis

Versão Última atualização Lançada em Compatível até Disponível até Observações
Ambiente de execução do Spark 3.0 16/10/2025 08/09/2025 Versão de pré-lançamento.
Tempo de execução do Spark 2.3 LTS 06/10/2025 28/05/2025 2027/11/26 2029/11/26 Versão de disponibilidade geral.
Tempo de execução do Spark 2.2 LTS 11/09/2025 27/03/2024 2026/09/30 30/09/2028 Versão de disponibilidade geral. Essa é a versão padrão.
Tempo de execução do Spark 1.2 LTS 11/09/2025 27/03/2024 2026/09/30 30/09/2028 Versão de disponibilidade geral.

Como escolher uma versão do ambiente de execução do Serverless para Apache Spark

A versão padrão atual do ambiente de execução sem servidor para Apache Spark está listada em Versões compatíveis do ambiente de execução sem servidor para Apache Spark. É possível escolher uma versão diferente do ambiente de execução do major.minor ao enviar uma carga de trabalho em lote ou criar uma sessão interativa ou um modelo de sessão.

Versões de ambiente de execução do Serverless para Apache Spark sem suporte

As seguintes versões do Serverless para Apache Spark não são compatíveis.

Versão Inclui Liberada em Última atualização Disponível até Observações
Ambiente de execução do Spark 2.1 Apache Spark 3.4.0
Conector do Cloud Storage 2.2.20
Conector do BigQuery 0.28.1
Java 17
Conda 23.3
Python 3.11
R 4.2
Scala 2.13
19/01/2022 30/5/2024 2026/08/28 Não compatível a partir de 30/05/2024. A versão 2.1.50 foi a última lançada.
Tempo de execução do Spark 2.0 Apache Spark 3.3.4
Conector do Cloud Storage 2.2.20
Java 17
Conda 22.9
Python 3.10
R 4.1
Scala 2.13
21/10/2022 2024/08/22 2026/08/28 Não compatível desde 22/08/2024. A versão 2.0.84 foi a última lançada.
Ambiente de execução do Spark 1.1 Apache Spark 3.3.4
Conector do Cloud Storage 2.2.28
Conector do BigQuery 0.28.1
Java 11
Conda 22.11
Python 3.10
R 4.2
Scala 2.12
27/01/2023 31/07/2025 2027/07/31 Não será compatível a partir de 31/07/2025. A versão 1.1.111 foi a final lançada.
Tempo de execução do Spark 1.0 Apache Spark 3.2.3
Conector do Cloud Storage 2.2.11
Conda 4.11
Java 11
Python 3.9
R 4.1
Scala 2.12.17
19/01/2022 2023/2/03 30/05/2025 Não compatível desde 03/02/2023. A versão 1.0.29 foi a última lançada.