Monitorare la definizione del processo Apache Spark

Usando il monitoraggio inline dell'elemento di definizione del processo Spark, è possibile tenere traccia degli elementi seguenti:

  • Monitorare lo stato e lo stato di una definizione di processo Spark in esecuzione.
  • Visualizzare lo stato e la durata delle esecuzioni precedenti della definizione del processo Spark.

È possibile ottenere queste informazioni dal menu contestuale Esecuzioni recenti nell'area di lavoro o esplorando le attività di definizione del processo Spark nell'hub di monitoraggio.

Monitoraggio inline della definizione del processo Spark

La funzionalità di monitoraggio inline della definizione del processo Spark consente di visualizzare l'invio della definizione del processo Spark ed eseguire lo stato in tempo reale. È anche possibile visualizzare le esecuzioni e le configurazioni precedenti della definizione del processo Spark e passare alla pagina dei dettagli dell'applicazione Spark per visualizzare altri dettagli.

Screenshot showing the spark job definition inline monitoring.

Visualizzazione elemento definizione processo Spark nell'area di lavoro

È possibile accedere alle esecuzioni del processo associate a specifiche voci di definizione del processo Spark usando il menu contestuale Esecuzione recente nella home page dell'area di lavoro.

Screenshot showing the spark job definition item view in workspace.

La definizione del processo Spark viene eseguita nell'hub di monitoraggio

Per visualizzare tutte le applicazioni Spark correlate a una definizione di processo Spark, passare all'hub di monitoraggio. Ordinare o filtrare la colonna Tipo di elemento per visualizzare tutte le attività di esecuzione associate alle definizioni dei processi Spark.

Screenshot showing the spark job definition runs in Monitoring hub.

Il passaggio successivo dopo aver visualizzato i dettagli di un'applicazione Apache Spark consiste nel visualizzare lo stato del processo Spark sotto la cella Notebook. È possibile fare riferimento a