HDInsightSparkTaskEvents

События задач Spark.

Атрибуты таблицы

attribute	Значение
Типы ресурсов	microsoft.hdinsight/clusters
Категории	Ресурсы Azure
Решения	LogManagement
Базовый журнал	Нет
Преобразование во время приема	Да
Примеры запросов	-

Столбцы

Столбец	Type	Описание
ApplicationId	строка	Идентификатор приложения, создающего запись.
AttemptId	строка	Идентификатор попытки задачи.
_BilledSize	real	Размер записи в байтах
BytesRead	long	Число байтов, считанных во время выполнения задачи.
BytesWritten	long	Число байтов, записанных задачей.
ClusterDnsName	строка	DNS-имя кластера, на котором выполняется задача.
ClusterTenantId	строка	Идентификатор клиента кластера, выполняющего задачу.
DiskBytesSpilled	long	Количество перенесенных байтов диска.
EndReason	строка	Причина, по которой задача закончилась.
ExecutorCPUTime	long	Время ЦП, затраченное исполнителем задачи.
ExecutorDeserializeCPUTime	long	Время ЦП, затраченное исполнителем задачи на десериализацию.
ExecutorDeserializeTime	long	Время, затраченное исполнителем задачи на десериализацию.
ExecutorId	строка	Исполнитель идентификатора.
ExecutorRunTime	long	Время, затраченное исполнителем задачи на выполнение.
Сбой	bool	Логическое значение, описывающее, завершилась ли задача сбоем.
Время окончания	DATETIME	Время (UTC) завершения задачи.
Host	строка	Полное доменное имя узла, на котором выполняется задача.
InputMetrics	long	Метрики, связанные с входными данными задачи.
IPAddress	строка	IP-адрес узла, на котором выполняется задача.
_IsBillable	строка	Указывает, является ли прием данных оплачиваемым. Если _IsBillable false не выставляется счет в вашей учетной записи Azure
JvmGcTime	long	Время, затраченное на сбор мусора виртуальной машины Java.
Killed	bool	Логическое описание того, была ли задача завершена.
Время запуска	DATETIME	Время (UTC) запуска задачи.
MemoryBytesSpilled	long	Байты памяти, которые были перенесены.
NumUpdatedBlockStatuses	long	Число обновленных состояний блоков во время выполнения задачи.
Выходные метрики	long	Метрики, связанные с выходными данными задачи.
PeakExecutionMemory	long	Пиковый объем памяти, используемый во время выполнения.
RecordsRead	long	Количество записей, прочитанных во время выполнения задачи.
ЗаписиЗапись	long	Количество записей, записанных задачей.
Регион	строка	Регион кластера, на котором выполняется задача.
_ResourceId	строка	Уникальный идентификатор ресурса, с которым связана запись
ResultSerializationTime	long	Время сериализации, затраченное на получение результата.
ResultSize	long	Размер результата.
Роль	строка	Тип узла, на котором выполняется задача.
SchedulerDelay	long	Величина задержки, которую испытывает планировщик.
ShuffleBytesWritten	long	Байты, записанные во время задачи перетасовки.
ShuffleFetchWaitTime	long	Время, затраченное на ожидание получения.
ShuffleLocalBlocksFetched	long	Количество локальных блоков, которые были превзированы во время выполнения задачи перетасовки.
ShuffleReadMetrics	long	Метрики, связанные с перетасовками чтения.
ShuffleRecordsWritten	long	Количество записей, записанных во время задачи перемешивания.
ShuffleRemoteBlocksFetched	long	Количество удаленных блоков, которые были превзированы во время выполнения задачи перемешивания.
ShuffleTotalBlocksFetched	long	Количество блоков, превзванных во время выполнения задачи перемешивания.
ShuffleTotalBytesRead	long	Число байтов, считанных во время задачи перемешивания.
ShuffleWriteMetrics	long	Метрики, связанные с записью в случайном порядке.
ShuffleWriteTime	long	Время, затраченное на запись во время задачи перемешивая.
SourceSystem	строка	Тип агента, которым было выполнено событие. Например, OpsManager для агента Windows— прямое подключение или Operations Manager, Linux для всех агентов Linux или Azure для Диагностика Azure
StageId	строка	Идентификатор этапа, связанного с задачей.
_SubscriptionId	строка	Уникальный идентификатор подписки, с которой связана запись
TaskId	строка	Идентификатор задачи.
Тип задачи	строка	Тип задачи.
TenantId	строка	Идентификатор рабочей области Log Analytics
TimeGenerated	DATETIME	Метка времени создания журнала (в формате UTC).
Тип	строка	Имя таблицы.
UpdatedBlocks	long	Количество обновленных блоков.
UserSubscriptionId	строка	Идентификатор подписки кластера, на котором выполняется задача.