Övervaka din Apache Spark-jobbdefinition

Med hjälp av Spark-jobbdefinitionsobjektets infogade övervakning kan du spåra följande:

  • Övervaka förloppet och statusen för en spark-jobbdefinition som körs.
  • Visa status och varaktighet för tidigare Spark-jobbdefinitionskörningar.

Du kan hämta den här informationen från snabbmenyn Senaste körningar på arbetsytan eller genom att bläddra i Spark-jobbdefinitionsaktiviteterna i övervakningshubben.

Infogad övervakning av Spark-jobbdefinition

Med funktionen för infogad övervakning av Spark-jobbdefinition kan du visa sändnings- och körningsstatus för Spark-jobbdefinitioner i realtid. Du kan också visa Spark-jobbdefinitionens tidigare körningar och konfigurationer och gå till spark-programinformationssidan för att visa mer information.

Screenshot showing the spark job definition inline monitoring.

Vyn Spark-jobbdefinitionsobjekt på arbetsytan

Du kan komma åt jobbkörningarna som är associerade med specifika Definitionsobjekt för Spark-jobb med snabbmenyn Senaste körning på arbetsytans startsida.

Screenshot showing the spark job definition item view in workspace.

Spark-jobbdefinitionen körs i övervakningshubben

Om du vill visa alla Spark-program som är relaterade till en Spark-jobbdefinition går du till övervakningshubben. Sortera eller filtrera kolumnen Objekttyp för att visa alla körningsaktiviteter som är associerade med Spark-jobbdefinitionerna.

Screenshot showing the spark job definition runs in Monitoring hub.

Nästa steg när du har tittat på information om ett Apache Spark-program är att visa Spark-jobbframsteg under notebook-cellen. Du kan referera till