このドキュメントでは、サポートされている Apache Spark 用 Serverless ランタイム バージョンとサポートされていない Apache Spark 用 Serverless ランタイム バージョンを一覧表示し、それぞれの特性について説明します。
ランタイム ノードのロケーション
このセクションでは、 Google Cloud Serverless for Apache Spark ランタイム バージョンがリージョン内のノードを割り当てて、バッチ ワークロードとインタラクティブ セッションを実行する方法について説明します。
ランタイム バージョン
3.0+: 取得可能性を高め、ゾーンの在庫切れを回避するために、Apache Spark 向け Serverless は、ワークロードまたはセッションのリージョン内の複数のゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するノードを割り当てることがあります。リージョン内のノード間のクロスゾーン ネットワーク トラフィックに追加費用は発生しません。3.0より前のランタイム バージョンでは、Apache Spark 向け Serverless は、ワークロードまたはセッションのリージョン内の単一のゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するためにノードを割り当てます。
ランタイムの可用性とサポート
Apache Spark 向け Serverless LTS(長時間サポート)ランタイム バージョンは 30 か月間サポートされます。Apache Spark 用 Serverless の非 LTS ランタイム バージョンは 12 か月間サポートされます。
Serverless for Apache Spark ランタイム バージョンは、サポート終了日から 2 年間使用できます。
ランタイムのサブマイナー バージョンの固定はサポートされていません。
サポートされている Apache Spark 向け Serverless ランタイム バージョン
| バージョン | 最終更新日時 | リリース日 | サポート期限 | 有効期限 | メモ |
|---|---|---|---|---|---|
| Spark ランタイム 3.0 | 2025/12/04 | 2025/12/04 | 2027/01/31 | 2029/01/31 | 一般提供リリース |
| Spark ランタイム 2.3 LTS | 2025/11/13 | 2025/05/28 | 2027/11/26 | 2029/11/26 | 一般提供リリース |
| Spark ランタイム 2.2 LTS | 2025/11/13 | 2024/03/27 | 2026/09/30 | 2028/09/30 | 一般向けのリリース。これがデフォルトのバージョンです。 |
| Spark ランタイム 1.2 LTS | 2025/11/13 | 2024/03/27 | 2026/09/30 | 2028/09/30 | 一般提供リリース |
Apache Spark 向け Serverless ランタイム バージョンを選択する方法
現在のデフォルトの Serverless for Apache Spark ランタイム バージョンは、サポートされている Serverless for Apache Spark ランタイム バージョンに記載されています。バッチ ワークロードを送信するとき、インタラクティブ セッションまたはセッション テンプレートを作成するときに、別の major.minor ランタイム バージョンを選択できます。
サポートされていない Apache Spark 向け Serverless ランタイム バージョン
次の Serverless for Apache Spark のバージョンはサポートされていません。
| バージョン | 含める | リリース日 | 最終更新 | 有効期限: | メモ |
|---|---|---|---|---|---|
| Spark ランタイム 2.1 | Apache Spark 3.4.0 Cloud Storage コネクタ 2.2.20 BigQuery コネクタ 0.28.1 Java 17 Conda 23.3 Python 3.11 R 4.2 Scala 2.13 |
2022/01/19 | 2024/5/30 | 2026/08/28 | 2024 年 5 月 30 日の時点でサポートされていないバージョン。2.1.50 が最終リリース バージョンでした。 |
| Spark ランタイム 2.0 | Apache Spark 3.3.4 Cloud Storage コネクタ 2.2.20 Java 17 Conda 22.9 Python 3.10 R 4.1 Scala 2.13 |
2022/10/21 | 2024/08/22 | 2026/08/28 | 2024 年 8 月 22 日の時点でサポートされていないバージョン。2.0.85 が最終リリース バージョンでした。 |
| Spark ランタイム 1.1 | Apache Spark 3.3.4 Cloud Storage コネクタ 2.2.28 BigQuery コネクタ 0.28.1 Java 11 Conda 22.11 Python 3.10 R 4.2 Scala 2.12 |
2023/01/27 | 2025/07/31 | 2027/07/31 | 2025 年 7 月 31 日の時点でサポートされていないバージョン。1.1.111 が最終リリース バージョンでした。 |
| Spark ランタイム 1.0 | Apache Spark 3.2.3 Cloud Storage コネクタ 2.2.11 Conda 4.11 Java 11 Python 3.9 R 4.1 Scala 2.12.17 |
2022/01/19 | 2023/2/03 | 2025/05/30 | 2023 年 2 月 3 日の時点ではサポートされていません。1.0.29 が最終リリース バージョンでした。 |