Журналы диагностики Apache Spark в Azure Synapse Analytics

  • Статья

Чтобы устранить неполадки, связанные с пулами Apache Spark в рабочей области Azure Synapse Analytics, служба поддержки Майкрософт и команда разработчиков Azure Synapse Analytics могут просматривать и скачивать журналы диагностики, связанные с пулами Apache Spark. Корпорация Майкрософт может получить доступ к данным журнала или создать временные копии для устранения инцидента в службе поддержки.

Журналы, собранные для устранения неполадок

В следующих таблицах перечислены данные журнала, которые будут собираться для устранения неполадок в службе поддержки. Кроме того, вам может быть предложено предоставить те же типы данных из пулов Apache Spark с помощью Synapse Studio.

Тип Описание
Журналы драйверов Apache Spark Программа драйвера Spark — это критически важный процесс, который используется для согласования ресурсов с диспетчером кластеров и планирования выполнения задания. Журналы драйверов содержат сведения о выполнении задания и используемых ресурсах. Эти сведения важны для устранения неполадок с приложением Spark.
Журналы исполнителя Apache Spark Исполнители Spark — это процессы, связанные с рабочими узлами, которые отвечают за выполнение отдельных задач в данном задании Spark. Они запускаются в начале приложения Spark и обычно выполняются в течение всего времени существования приложения. После выполнения задачи исполнители Spark отправляют результаты в приложение драйвера. Журналы исполнителя содержат сведения о выполнении отдельных задач приложения и о том, не удалось ли выполнить какие-либо из них.
Журналы событий Apache Spark Журналы событий Spark содержат метрики, связанные с выполнением и производительностью всех исполнителей. Они также содержат список этапов и задач планировщика, а также сведения о среде выполнения.

Свяжитесь с нами для получения помощи

Если у вас есть вопросы или вам нужна помощь, создайте запрос в службу поддержки или обратитесь за поддержкой сообщества Azure. Вы также можете отправить отзыв о продукте в сообщество отзывов Azure.