Azure Synapse Runtime for Apache Spark 3.2 (非推奨)
Azure Synapse Analytics は、Apache Spark の複数のランタイムをサポートしています。 このドキュメントでは、Azure Synapse Runtime for Apache Spark 3.2 のランタイム コンポーネントとバージョンについて説明します。
注意事項
Apache Spark 3.2 用 Azure Synapse Runtime の非推奨と無効化の通知
- 2023 年 7 月 8 日、Apache Spark 3.2 用 Azure Synapse Runtime のサポート終了が発表されました。
- 2024 年 7 月 8 日より、Azure Synapse は Spark 3.2 ランタイムの公式サポートを中止します。
- Apache Spark ライフサイクル ポリシーの Synapse ランタイムに従い、Apache Spark 3.2 用の Azure Synapse ランタイムは 2024 年 7 月 8 日をもって廃止されます。 既存のワークフローは引き続き実行されますが、セキュリティ更新プログラムとバグ修正プログラムは使用できなくなります。 メタデータは一時的に Synapse ワークスペースに残ります。
- 2024 年 7 月 8 日より前に Apache Spark 3.2 ワークロードを Azure Synapse Runtime for Apache Spark 3.4 (GA) にアップグレードすることを強くお勧めします。
コンポーネントのバージョン
| コンポーネント | Version |
|---|---|
| Apache Spark | 3.2.1 |
| オペレーティング システム | Ubuntu 18.04 |
| Java | 1.8.0_282 |
| Scala | 2.12.15 |
| Hadoop | 3.3.1 |
| .NET Core | 3.1 |
| .NET | 2.0.0 |
| Delta Lake | 1.2 |
| Python | 3.8 |
| R (プレビュー) | 4.2 |
Synapse-Python38-CPU.yml には、Azure Synapse Spark の既定の Python 3.8 環境に付属しているライブラリの一覧が含まれています。
ライブラリ
Azure Synapse Runtime for Apache Spark 3.2 for Java/Scala、Python、R に含まれるライブラリを確認するには、 Azure Synapse Runtime for Apache Spark 3.2 リリース ノートに移動してください
次のステップ
Apache Spark バージョン間の移行 - サポート
古いランタイム バージョンから Azure Synapse Runtime for Apache Spark 3.3 または 3.4 への移行のガイダンスについては、「 Runtime for Apache Spark の概要を参照してください。