既知の問題 - 環境を介してインストールされた .jar ファイルに対して PySpark インポート ステートメントが失敗する

  • [アーティクル]

.jar 形式のカスタム ライブラリ ファイルを Fabric 環境にアップロードすることができます。 環境のアップロードと発行は成功しますが、PySpark セッションでのインポート コマンドは失敗します。

状態: オープン

製品エクスペリエンス: Data Engineering

現象

PySpark セッションでは、import library ステートメントが Class not found (クラスが見つかりません) エラーで失敗します。 .jar 形式のカスタム ライブラリは、環境を介してインストールされています。

解決策と回避策

この問題を回避するには、次のコマンドを使用して Notebook セッション %%configure -f { "conf": { "spark.jars": <>", } } にライブラリをインストールします。または、必要に応じて PySpark から Scala セッションに切り替えることができます。

関連するコンテンツ