Обзор мониторинга Apache Spark в Microsoft Fabric
Мониторинг Microsoft Fabric Spark предназначен для предоставления интерфейса на основе веб-интерфейса со встроенными широкими возможностями для мониторинга хода выполнения и состояния приложений Spark, просмотра прошлых действий Spark, анализа и оптимизации производительности, а также упрощения устранения неполадок при сбоях. Доступно несколько точек входа для просмотра, мониторинга и просмотра сведений о приложении Spark.
Важно!
Microsoft Fabric находится в предварительной версии.
Центр мониторинга
Центр мониторинга служит централизованным порталом для просмотра действий Spark между элементами. Вы можете быстро просмотреть запущенные приложения Spark, активированные из записных книжек, определений заданий Spark и конвейеров. Вы также можете искать и фильтровать приложения Spark на основе различных критериев и детализировать, чтобы просмотреть дополнительные сведения о выполнении приложения Spark.
Последние запуски элемента
При работе с определенными элементами функция последних выполнений элемента позволяет просматривать текущие и последние действия элемента и получать аналитические сведения о отправителях, состоянии, длительности и других данных о действиях, отправленных вами или другими пользователями.
Контекстный мониторинг записной книжки
Контекстный мониторинг записной книжки предоставляет возможность разработки, мониторинга и отладки заданий Spark в одном месте. Вы можете отслеживать ход выполнения задания Spark, просматривать задачи выполнения Spark и исполнителей, а также получать доступ к журналам Spark в записной книжке на уровне ячейки Записная книжка. Помощник Spark также встроен в записную книжку для предоставления рекомендаций в режиме реального времени по выполнению кода и ячейки Spark и выполнения анализа ошибок.
Встроенный мониторинг определения задания Spark
Функция встроенного мониторинга определения задания Spark позволяет просматривать отправку определения задания Spark и состояние выполнения в режиме реального времени, а также просматривать прошлые запуски и конфигурации определения задания Spark. Чтобы просмотреть дополнительные сведения, перейдите на страницу сведений о приложении Spark.
Встроенный мониторинг действий Spark конвейера
Для встроенного мониторинга действий Pipeline Spark в конвейере встроены прямые ссылки в действия определения заданий Записная книжка и Spark в конвейере. Вы можете просмотреть сведения о выполнении приложения Spark, соответствующие определения задания и записной книжки Spark snapshot, а также получить доступ к журналам Spark для устранения неполадок. Если действия Spark завершаются сбоем, встроенное сообщение об ошибке также доступно в действиях Pipeline Spark.