HDInsightSparkTaskEvents

События задачи Spark.

Атрибуты таблицы

Атрибут	Значение
Типы ресурсов	Microsoft.hdinsight/clusters
Категории	Ресурсов Azure
Решения	Управление логами
Базовый журнал	нет
Преобразование на этапе поглощения данных	Да
Примеры запросов	-

Столбцы

Столбец	Тип	Описание
ApplicationId	строка	Идентификатор приложения, создающего запись.
AttemptId	строка	Идентификатор попытки выполнения задачи.
_BilledSize (Размер счета)	реальный	Размер записи в байтах
Прочитанные байты	длинный	Число байтов, считываемых во время задачи.
BytesWritten	длинный	Количество байтов, записанных задачей.
Имя DNS кластера	строка	DNS-имя кластера, выполняющего задачу.
Идентификатор арендатора кластера	строка	Идентификатор клиента кластера, выполняющего задачу.
DiskBytesSpilled	длинный	Число разливаемых байтов диска.
Причина завершения	строка	Причина, по которой задача закончилась.
ИсполнителяCPUTime	длинный	Время ЦП, затраченное исполнителем задачи.
ExecutorDeserializeCPUTime	длинный	Время ЦП, затраченное на десериализацию исполнителя задач.
ExecutorDeserializeTime	длинный	Время, затраченное исполнителем задачи на десериализацию.
Идентификатор исполнителя	строка	Обработчик идентификаторов.
Исполнитель времени выполнения	длинный	Время, затраченное исполнителем задачи на выполнение.
Неудачно	булевая переменная (bool)	Логическое описание сбоя задачи.
Время завершения	дата/время	Время завершения задачи (UTC).
Хост	строка	Полное доменное имя узла, выполняющего задачу.
Входные метрики	длинный	Метрики, связанные с входными данными задачи.
IP-адрес	строка	IP-адрес узла, выполняющего задачу.
_ПодлежитУчету	строка	Указывает, является ли загрузка данных платной. Когда _IsBillable false, обработка данных не взимается с вашей учетной записи Azure.
JvmGcTime	длинный	Время, затраченное JVM на сборку мусора.
Убитый	булевая переменная (bool)	Логическая переменная, указывающая, была ли задача завершена.
Время запуска	дата/время	Время запуска задачи (UTC).
MemoryBytesSpilled	длинный	Байты разливаемой памяти.
NumUpdatedBlockStatuses	длинный	Число обновленных состояний блока во время задачи.
Выходные метрики	длинный	Метрики, связанные с выходными данными задачи.
ПиковаяИспользуемаяПамять	длинный	Пиковый объем памяти, используемый во время выполнения.
ЗаписиПрочитаны	длинный	Количество записей, считываемых во время задачи.
ЗаписиЗаписаны	длинный	Количество записей, записанных задачей.
Область/регион	строка	Регион кластера, на котором выполняется задача.
_ResourceId (идентификатор ресурса)	строка	Уникальный идентификатор ресурса, с которым связана запись.
ВремяСериализацииРезультата	длинный	Время сериализации, затраченное на получение результата.
РазмерРезультата	длинный	Размер результата.
Роль	строка	Тип узла, выполняющего задачу.
SchedulerDelay	длинный	Величина задержки планировщиком.
Перемешивание записанных байт	длинный	байты, записанные во время задачи перетасовки.
время ожидания получения Shuffle	длинный	Время, затраченное на ожидание получения.
ShuffleLocalBlocksFetched	длинный	Количество локальных блоков, полученных во время операции перемешивания.
ShuffleReadMetrics	длинный	Метрики, связанные с перетасовкой чтения.
Записанные перестановки данных	длинный	Количество записей, записанных во время задачи перетасовки.
ПеремешиваниеУдаленныхБлоковПолучено	длинный	Количество удаленных блоков, сложенных во время задачи перетасовки.
ShuffleTotalBlocksFetched	длинный	Количество блоков, полученных во время задачи перемешивания.
ShuffleTotalBytesRead (Общее количество прочитанных байтов при перемешивании)	длинный	Число байтов, прочитанных во время задачи перетасовки.
ShuffleWriteMetrics	длинный	Метрики, связанные с перетасовкой записей.
Время записи Shuffle	длинный	Время, затраченное на запись во время задачи перемешивания.
SourceSystem	строка	Тип агента, которым было собрано событие. Например, OpsManager для агента Windows прямого подключения или Operations Manager, Linux для всех агентов Linux, или Azure для Azure Diagnostics
StageId	строка	Идентификатор этапа, связанного с задачей.
_SubscriptionId (идентификатор подписки)	строка	Уникальный идентификатор подписки, с которой связана запись
Идентификатор задачи	строка	Идентификатор задачи.
Тип задачи	строка	Тип задачи.
Идентификатор арендатора (TenantId)	строка	Идентификатор рабочей области Log Analytics
Время генерации	дата/время	Метка времени (UTC), когда журнал был сгенерирован.
Тип	строка	Имя таблицы.
Обновленные Блоки	длинный	Количество обновленных блоков.
ИдентификаторПодпискиПользователя	строка	Идентификатор подписки кластера, выполняющего задачу