HDInsightSparkTaskEvents

Spark 任务事件。

表属性

Attribute
资源类型 microsoft.hdinsight/clusters
类别 Azure 资源
解决方案 LogManagement
基本日志
引入时间转换
示例查询 -

类型 说明
ApplicationId string 生成记录的应用程序的应用程序 ID。
AttemptId 字符串 任务尝试的 ID。
_BilledSize real 记录大小(以字节为单位)
BytesRead long 任务期间读取的字节数。
BytesWritten long 任务写入的字节数。
ClusterDnsName 字符串 运行任务的群集的 DNS 名称。
ClusterTenantId 字符串 运行任务的群集的租户 ID。
DiskBytesSpilled long 溢出的磁盘字节数。
EndReason 字符串 任务结束的原因。
执行程序CPUTime long 任务执行程序消耗的 CPU 时间。
ExecutorDeserializeCPUTime long 任务执行程序反序列化所用的 CPU 时间。
ExecutorDeserializeTime long 任务执行程序反序列化所用的时间。
ExecutorId 字符串 ID 执行程序。
ExecutorRunTime long 任务执行程序运行所用的时间。
已失败 bool 描述任务是否失败的布尔值。
FinishTime datetime 任务完成 (UTC) 时间。
主机 string 运行任务的主机的 FQDN。
InputMetrics long 与任务输入关联的指标。
IpAddress 字符串 运行任务的节点的 IP 地址。
_IsBillable 字符串 指定引入数据是否可计费。 当_IsBillable false 引入时,不会向 Azure 帐户计费
JvmGcTime long JVM 用于垃圾回收的时间。
Killed bool 描述任务是否已终止的布尔值。
LaunchTime datetime 启动任务 (UTC) 的时间。
MemoryBytesSpilled long 溢出的内存字节数。
NumUpdatedBlockStatuses long 任务期间更新的块状态数。
OutputMetrics long 与任务输出关联的指标。
PeakExecutionMemory long 执行期间使用的内存峰值量。
RecordsRead long 任务期间读取的记录数。
RecordsWritten long 任务写入的记录数。
区域 字符串 运行任务的群集的区域。
_ResourceId 字符串 与记录关联的资源的唯一标识符
ResultSerializationTime long 获取结果时所用的序列化时间。
ResultSize long 结果的大小。
角色 字符串 运行任务的节点的类型。
SchedulerDelay long 计划程序经历的延迟量。
ShuffleBytesWritten long 在随机任务期间写入的字节数。
ShuffleFetchWaitTime long 等待提取所用的时间。
ShuffleLocalBlocksFetched long 在随机任务期间提取的本地块数。
ShuffleReadMetrics long 与随机读取关联的指标。
ShuffleRecordsWritten long 在随机任务期间写入的记录数。
ShuffleRemoteBlocksFetched long 在随机任务期间提取的远程块数。
ShuffleTotalBlocksFetched long 在随机任务期间提取的块数。
ShuffleTotalBytesRead long 在随机任务期间读取的字节数。
ShuffleWriteMetrics long 与随机写入关联的指标。
ShuffleWriteTime long 在随机任务期间所花费的写作时间。
SourceSystem 字符串 事件收集依据的代理类型。 例如,OpsManager对于 Windows 代理,对于直接连接或 Operations Manager,Linux对于所有 Linux 代理,或者Azure对于 Azure 诊断
StageId 字符串 与任务关联的阶段的 ID。
_SubscriptionId 字符串 与记录关联的订阅的唯一标识符
TaskId 字符串 任务的 ID。
TaskType 字符串 任务类型。
TenantId 字符串 Log Analytics 工作区 ID
TimeGenerated datetime 生成日志的时间戳 (UTC)。
类型 字符串 表的名称
UpdatedBlocks long 已更新的块数。
UserSubscriptionId 字符串 运行任务的群集的订阅 ID