Мониторинг определения задания Apache Spark

С помощью встроенного мониторинга элемента определения задания Spark можно отслеживать следующее:

  • Отслеживайте ход выполнения и состояние определения задания Spark.
  • Просмотр состояния и длительности предыдущих запусков определения задания Spark.

Эти сведения можно получить из контекстного меню "Последние запуски " в рабочей области или просмотре действий определения задания Spark в центре мониторинга.

Встроенный мониторинг определения задания Spark

Функция встроенного мониторинга определения задания Spark позволяет просматривать отправку определения задания Spark и выполнять состояние в режиме реального времени. Вы также можете просмотреть прошлые запуски и конфигурации определения задания Spark и перейти на страницу сведений о приложении Spark, чтобы просмотреть дополнительные сведения.

Screenshot showing the spark job definition inline monitoring.

Представление элемента определения задания Spark в рабочей области

Вы можете получить доступ к выполнению задания, связанному с определенными элементами определения задания Spark, с помощью контекстного меню "Последние запуски " на домашней странице рабочей области.

Screenshot showing the spark job definition item view in workspace.

Определение задания Spark выполняется в центре мониторинга

Чтобы просмотреть все приложения Spark, связанные с определением задания Spark, перейдите в центр мониторинга. Отсортируйте или отфильтруйте столбец типа элемента, чтобы просмотреть все действия выполнения, связанные с определениями заданий Spark.

Screenshot showing the spark job definition runs in Monitoring hub.

Следующий шаг после просмотра сведений о приложении Apache Spark — просмотр хода выполнения задания Spark под ячейкой Notebook. Вы можете ссылаться на