已知問題 - 透過環境安裝.jar檔案的 PySpark 匯入語句失敗
您可以將具有.jar格式的自訂連結庫檔案上傳至 Fabric 環境。 雖然上傳和發佈環境成功,但匯入命令會在 PySpark 工作階段中失敗。
狀態:開啟
產品體驗:資料工程師
徵兆
在 PySpark 工作階段中,匯入連結庫語句失敗,且 找不到 類別錯誤。 已透過環境安裝具有.jar格式的自定義連結庫。
解決方案與因應措施
若要解決此問題,您可以使用下列命令在 Notebook 工作階段中安裝連結庫: %%configure -f { "conf": { "spark.jars": <>", } }
或者,如果適用,您可以從 PySpark 切換至 Scala 工作階段。