Databricks Runtime 10.x の移行ガイド

  • [アーティクル]

このガイドは、Azure Databricks のワークロードを Databricks Runtime 10.x の最新バージョンに移行するのに役立ちます。

Databricks では、サポートされている Databricks Runtime LTS バージョンに、そのバージョンの最新のサポートされている LTS バージョンからワークロードを移行することを推奨しています。 そのため、この記事では、Databricks Runtime 9.1 LTS から Databricks Runtime 13.3 LTS に、ワークロードを移行する方法について重点的に説明します。

Note

LTS は、このバージョンが長期的にサポートされていることを意味します。 Databricks Runtime LTS バージョンのライフサイクルに関する説明を参照してください。

Databricks Runtime 9.0 以前から Databricks Runtime 10.4 LTS にワークロードを移行するには、Databricks では、次の順序でワークロードを移行することを推奨しています。

  1. Databricks Runtime 9.1 LTS に移行します。 「Databricks Runtime 9.1 LTS 移行ガイド」を参照してください。
  2. この記事のガイダンスに従って、Databricks Runtime 9.1 LTS から Databricks Runtime 10.4 LTS に移行します。

Databricks Runtime 11.3 LTS は、サポートされている最新の LTS バージョンです。 Databricks Runtime 9.1 LTS から Databricks Runtime 11.3 LTS にワークロードを移行する方法については、「Databricks Runtime 11.x の移行ガイド」を参照してください。

Databricks Runtime バージョン間の移行の詳細については、「Databricks Runtime の移行ガイド」を参照してください。

Apache Spark の移行ガイダンス

Databricks Runtime の最新バージョンは、Apache Spark 3.4.0 を利用する 13.2 です。 Spark 固有の移行情報については、Databricks Runtime バージョン別の次のリンクの 1 つ以上をクリックして、対応する Apache Spark 移行ガイドを表示します。 参考までに、Databricks Runtime 9.1 LTS は、Apache Spark 3.1.2 を利用しています。

Databricks Runtime のバージョン Apache Spark のバージョン
10.3 - 10.5 3.2.1
10.0 - 10.2 3.2.0
9.1 LTS 3.1.2

Databricks Runtime システム環境のプロパティ、機能、ライブラリ

Databricks Runtime 9.1 LTS から Databricks Runtime 10.x の最新バージョンまでの Databricks Runtime リリースにおけるシステム環境プロパティ、および機能とライブラリの新規追加、変更、非推奨については、次を参照してください。

リリース後のメンテナンス更新プログラムは、「Databricks ランタイム メンテナンス更新プログラム」に記載されています。