Condividi tramite

Problema noto: le istruzioni di importazione pySpark hanno esito negativo per i file .jar installati tramite l'ambiente

  • Articolo

È possibile caricare un file di libreria personalizzato con un formato .jar in un ambiente fabric. Anche se il caricamento e la pubblicazione dell'ambiente hanno esito positivo, il comando di importazione non riesce nella sessione PySpark.

Stato: aperto

Esperienza prodotto: Ingegneria dei dati

Sintomi

In una sessione PySpark l'istruzione della libreria di importazione non riesce e viene visualizzato un errore Class non trovato . La libreria personalizzata con un formato .jar è stata installata tramite un ambiente.

Strategie e soluzioni alternative

Per risolvere questo problema, è possibile usare il comando seguente per installare la libreria nella sessione notebook: %%configure -f { "conf": { "spark.jars": <>", } } in alternativa, è possibile passare da pySpark a una sessione Scala, se applicabile.

Contenuto correlato