HDInsightSparkTaskEvents
Spark 任务事件。
表属性
Attribute | 值 |
---|---|
资源类型 | microsoft.hdinsight/clusters |
类别 | Azure 资源 |
解决方案 | LogManagement |
基本日志 | 否 |
引入时间转换 | 是 |
示例查询 | - |
列
列 | 类型 | 说明 |
---|---|---|
ApplicationId | string | 生成记录的应用程序的应用程序 ID。 |
AttemptId | 字符串 | 任务尝试的 ID。 |
_BilledSize | real | 记录大小(以字节为单位) |
BytesRead | long | 任务期间读取的字节数。 |
BytesWritten | long | 任务写入的字节数。 |
ClusterDnsName | 字符串 | 运行任务的群集的 DNS 名称。 |
ClusterTenantId | 字符串 | 运行任务的群集的租户 ID。 |
DiskBytesSpilled | long | 溢出的磁盘字节数。 |
EndReason | 字符串 | 任务结束的原因。 |
执行程序CPUTime | long | 任务执行程序消耗的 CPU 时间。 |
ExecutorDeserializeCPUTime | long | 任务执行程序反序列化所用的 CPU 时间。 |
ExecutorDeserializeTime | long | 任务执行程序反序列化所用的时间。 |
ExecutorId | 字符串 | ID 执行程序。 |
ExecutorRunTime | long | 任务执行程序运行所用的时间。 |
已失败 | bool | 描述任务是否失败的布尔值。 |
FinishTime | datetime | 任务完成 (UTC) 时间。 |
主机 | string | 运行任务的主机的 FQDN。 |
InputMetrics | long | 与任务输入关联的指标。 |
IpAddress | 字符串 | 运行任务的节点的 IP 地址。 |
_IsBillable | 字符串 | 指定引入数据是否可计费。 当_IsBillable false 引入时,不会向 Azure 帐户计费 |
JvmGcTime | long | JVM 用于垃圾回收的时间。 |
Killed | bool | 描述任务是否已终止的布尔值。 |
LaunchTime | datetime | 启动任务 (UTC) 的时间。 |
MemoryBytesSpilled | long | 溢出的内存字节数。 |
NumUpdatedBlockStatuses | long | 任务期间更新的块状态数。 |
OutputMetrics | long | 与任务输出关联的指标。 |
PeakExecutionMemory | long | 执行期间使用的内存峰值量。 |
RecordsRead | long | 任务期间读取的记录数。 |
RecordsWritten | long | 任务写入的记录数。 |
区域 | 字符串 | 运行任务的群集的区域。 |
_ResourceId | 字符串 | 与记录关联的资源的唯一标识符 |
ResultSerializationTime | long | 获取结果时所用的序列化时间。 |
ResultSize | long | 结果的大小。 |
角色 | 字符串 | 运行任务的节点的类型。 |
SchedulerDelay | long | 计划程序经历的延迟量。 |
ShuffleBytesWritten | long | 在随机任务期间写入的字节数。 |
ShuffleFetchWaitTime | long | 等待提取所用的时间。 |
ShuffleLocalBlocksFetched | long | 在随机任务期间提取的本地块数。 |
ShuffleReadMetrics | long | 与随机读取关联的指标。 |
ShuffleRecordsWritten | long | 在随机任务期间写入的记录数。 |
ShuffleRemoteBlocksFetched | long | 在随机任务期间提取的远程块数。 |
ShuffleTotalBlocksFetched | long | 在随机任务期间提取的块数。 |
ShuffleTotalBytesRead | long | 在随机任务期间读取的字节数。 |
ShuffleWriteMetrics | long | 与随机写入关联的指标。 |
ShuffleWriteTime | long | 在随机任务期间所花费的写作时间。 |
SourceSystem | 字符串 | 事件收集依据的代理类型。 例如,OpsManager 对于 Windows 代理,对于直接连接或 Operations Manager,Linux 对于所有 Linux 代理,或者Azure 对于 Azure 诊断 |
StageId | 字符串 | 与任务关联的阶段的 ID。 |
_SubscriptionId | 字符串 | 与记录关联的订阅的唯一标识符 |
TaskId | 字符串 | 任务的 ID。 |
TaskType | 字符串 | 任务类型。 |
TenantId | 字符串 | Log Analytics 工作区 ID |
TimeGenerated | datetime | 生成日志的时间戳 (UTC)。 |
类型 | 字符串 | 表的名称 |
UpdatedBlocks | long | 已更新的块数。 |
UserSubscriptionId | 字符串 | 运行任务的群集的订阅 ID |
反馈
https://aka.ms/ContentUserFeedback。
即将发布:在整个 2024 年,我们将逐步淘汰作为内容反馈机制的“GitHub 问题”,并将其取代为新的反馈系统。 有关详细信息,请参阅:提交和查看相关反馈