Versions d'exécution sans serveur Managed Service pour Apache Spark

Ce document liste les versions d'exécution Managed Service pour Apache Spark compatibles et non compatibles, et décrit leurs caractéristiques.

Emplacement du nœud d'exécution

Cette section décrit comment les versions d'exécution de Managed Service pour Apache Spark allouent des nœuds dans une région pour exécuter des charges de travail par lot et des sessions interactives.

  • Versions d'exécution 3.0+ : pour faciliter la disponibilité et éviter les ruptures de stock zonales, Managed Service pour Apache Spark peut allouer des nœuds pour exécuter une charge de travail par lot ou une session interactive dans plusieurs zones de la région de la charge de travail ou de la session. Aucuns frais supplémentaires ne sont facturés pour le trafic réseau interzone entre les nœuds d'une région.

    Pour les versions de l'environnement d'exécution antérieures à 3.0, Managed Service pour Apache Spark alloue des nœuds pour exécuter une charge de travail par lot ou une session interactive dans une seule zone de la région de la charge de travail ou de la session.

Disponibilité et compatibilité des environnements d'exécution

  • Les versions d'exécution LTS (Long-Time-Support) de Managed Service pour Apache Spark sont compatibles pendant 30 mois. Les versions d'exécution non LTS de Managed Service pour Apache Spark sont compatibles pendant 12 mois.

  • Les versions d'exécution de Managed Service pour Apache Spark restent disponibles pendant deux ans après leur date de fin du support.

  • L'épinglage de la version mineure secondaire de l'environnement d'exécution n'est pas pris en charge.

Versions d'exécution Managed Service pour Apache Spark compatibles

Version Dernière mise à jour Publiées le Compatible jusqu'au Disponible jusqu'au Remarques
Environnement d'exécution Spark 3.0 25/08/2026 2025/12/04 31/01/2027 31/01/2029 Version en disponibilité générale
Environnement d'exécution Spark 2.3 LTS 23/09/2026 28/05/2025 26/11/2027 26/11/2029 Version en disponibilité générale
Environnement d'exécution Spark 2.2 LTS 23/09/2026 27/03/2024 31/03/2027 31/03/2029 Version en disponibilité générale. Il s'agit de la version par défaut.
Environnement d'exécution Spark 1.2 LTS 23/09/2026 27/03/2024 31/03/2027 31/03/2029 Version en disponibilité générale

Choisir une version d'exécution Managed Service pour Apache Spark

La version d'exécution par défaut actuelle de Managed Service pour Apache Spark est indiquée dans Versions d'exécution Managed Service pour Apache Spark compatibles. Vous pouvez choisir une autre version d'exécution major.minor lorsque vous envoyez une charge de travail par lot ou créez une session interactive ou un modèle de session.

Versions d'exécution Managed Service pour Apache Spark non compatibles

Les versions suivantes de Managed Service pour Apache Spark ne sont pas compatibles.

Version Inclut Date de sortie Dernière mise à jour Disponible jusqu'au Remarques
Environnement d'exécution Spark 2.1 Apache Spark 3.4.0
Connecteur Cloud Storage 2.2.20
Connecteur BigQuery 0.28.1
Java 17
Conda 23.3
Python 3.11
R 4.2
Scala 2.13
2022/01/19 30/05/2024 31/03/2027 Non compatible depuis le 30/05/2024. La version 2.1.50 était la dernière version publiée.
Environnement d'exécution Spark 2.0 Apache Spark 3.3.4
Connecteur Cloud Storage 2.2.20
Java 17
Conda 22.9
Python 3.10
R 4.1
Scala 2.13
2022/10/21 22/08/2024 31/03/2027 Non compatible à partir du 22/08/2024. La version 2.0.85 était la dernière version publiée.
Environnement d'exécution Spark 1.1 Apache Spark 3.3.4
Connecteur Cloud Storage 2.2.28
Connecteur BigQuery 0.28.1
Java 11
Conda 22.11
Python 3.10
R 4.2
Scala 2.12
27/01/2023 31/07/2025 31/07/2027 Non compatible à partir du 31/07/2025. La version 1.1.111 était la dernière version publiée.
Environnement d'exécution Spark 1.0 Apache Spark 3.2.3
Connecteur Cloud Storage 2.2.11
Conda 4.11
Java 11
Python 3.9
R 4.1
Scala 2.12.17
2022/01/19 03/02/2023 30/05/2025 Non compatible depuis le 3 février 2023. La version 1.0.29 était la dernière version publiée.