HDInsightSparkTaskEvents
Spark-Vorgangsereignisse.
Tabellenattribute
attribute | Wert |
---|---|
Ressourcentypen | microsoft.hdinsight/clusters |
Kategorien | Azure-Ressourcen |
Lösungen | LogManagement |
Standardprotokoll | No |
Transformation der Erfassungszeit | Yes |
Beispielabfragen | - |
Spalten
Spalte | Typ | BESCHREIBUNG |
---|---|---|
ApplicationId | Zeichenfolge | Die Anwendungs-ID der Anwendung, die den Datensatz erstellt. |
AttemptId | Zeichenfolge | Die ID des Vorgangsversuchs. |
_BilledSize | real | Die Datensatzgröße in Bytes |
BytesRead | long | Die Anzahl bytes, die während der Aufgabe gelesen werden. |
BytesWritten | long | Die Anzahl der von der Aufgabe geschriebenen Bytes. |
ClusterDnsName | Zeichenfolge | Der DNS-Name des Clusters, in dem die Aufgabe ausgeführt wird. |
ClusterTenantId | Zeichenfolge | Die Mandanten-ID des Clusters, in dem die Aufgabe ausgeführt wird. |
DiskBytesSpilled | long | Die Anzahl der verschütteten Datenträgerbytes. |
EndReason | Zeichenfolge | Grund, warum die Aufgabe beendet wurde. |
ExecutorCPUTime | long | Die cpu-Zeit, die vom Task-Executor verbraucht wird. |
ExecutorDeserializeCPUTime | long | Die CPU-Zeit, die der Task-Executor für die Deserialisierung aufgewendet hat. |
ExecutorDeserializeTime | long | Die Zeit, die der Taskausführungsor für die Deserialisierung aufgewendet hat. |
ExecutorId | Zeichenfolge | Der ID-Executor. |
ExecutorRunTime | long | Die Zeit, die der Task-Executor für die Ausführung aufgewendet hat. |
Fehler | bool | Boolesch, der beschreibt, ob bei der Aufgabe ein Fehler aufgetreten ist. |
FinishTime | datetime | Die Uhrzeit (UTC), zu der die Aufgabe abgeschlossen ist. |
Host | Zeichenfolge | Der FQDN des Hosts, auf dem die Aufgabe ausgeführt wird. |
InputMetrics | long | Die Metriken, die der Aufgabeneingabe zugeordnet sind. |
IpAddress | Zeichenfolge | Die IP-Adresse des Knotens, auf dem die Aufgabe ausgeführt wird. |
_IsBillable | Zeichenfolge | Gibt an, ob die Erfassung der Daten abrechenbar ist. Wenn _IsBillable erfasst wird false , wird Ihrem Azure-Konto nicht in Rechnung gestellt. |
JvmGcTime | long | Die Zeit, die die JVM für die Garbage Collection aufgewendet hat. |
Abgebrochen | bool | Boolescher Wert, der beschreibt, ob die Aufgabe beendet wurde. |
LaunchTime | datetime | Die Uhrzeit (UTC), zu der der Task gestartet wurde. |
MemoryBytesSpilled | long | Die Speicherbytes wurden verschüttet. |
NumUpdatedBlockStatuses | long | Die Nummer hat den Blockstatus während der Aufgabe aktualisiert. |
OutputMetrics | long | Die Metriken, die der Aufgabenausgabe zugeordnet sind. |
PeakExecutionMemory | long | Die maximale Menge an Arbeitsspeicher, die während der Ausführung verwendet wird. |
DatensätzeRead | long | Die Anzahl der Datensätze, die während der Aufgabe gelesen werden. |
RecordsWritten | long | Die Anzahl der von der Aufgabe geschriebenen Datensätze. |
Region | Zeichenfolge | Die Region des Clusters, in dem die Aufgabe ausgeführt wird. |
_ResourceId | Zeichenfolge | Ein eindeutiger Bezeichner für die Ressource, der der Datensatz zugeordnet ist. |
ResultSerializationTime | long | Die Serialisierungszeit, die beim Abrufen des Ergebnisses aufgewendet wurde. |
Resultsize | long | Größe des Ergebnisses. |
Rolle | Zeichenfolge | Der Typ des Knotens, auf dem die Aufgabe ausgeführt wird. |
SchedulerDelay | long | Das Ausmaß der Verzögerung, die beim Planer aufgetreten ist. |
ShuffleBytesWritten | long | Die Während des Shuffle-Tasks geschriebenen Bytes. |
ShuffleFetchWaitTime | long | Die Zeit, die auf den Abruf gewartet wird. |
ShuffleLocalBlocksFetched | long | Die Anzahl der lokalen Blöcke, die während der Shuffle-Aufgabe bereitgestellt wurden. |
ShuffleReadMetrics | long | Die Metriken, die shuffle-Lesevorgängen zugeordnet sind. |
ShuffleRecordsWritten | long | Die Anzahl der Datensätze, die während der Shuffle-Aufgabe geschrieben wurden. |
ShuffleRemoteBlocksFetched | long | Die Anzahl der Remoteblöcke, die während der Shuffle-Aufgabe angezeigt werden. |
ShuffleTotalBlocksFetched | long | Die Anzahl der Blöcke, die während der Shuffle-Aufgabe ausgeführt werden. |
ShuffleTotalBytesRead | long | Die Zahlenbytes, die während der Shuffle-Aufgabe gelesen werden. |
ShuffleWriteMetrics | long | Die Metriken, die shuffle-Schreibvorgängen zugeordnet sind. |
ShuffleWriteTime | long | Die Zeit, die während der Shuffle-Aufgabe für das Schreiben aufgewendet wird. |
SourceSystem | Zeichenfolge | Der Typ des Agents, von dem das Ereignis erfasst wurde. Beispielsweise OpsManager für den Windows-Agent, entweder direkte Verbindung oder Operations Manager, Linux für alle Linux-Agents oder Azure für Azure-Diagnose |
StageId | Zeichenfolge | Die ID der der Aufgabe zugeordneten Phase. |
_SubscriptionId | Zeichenfolge | Ein eindeutiger Bezeichner für das Abonnement, dem der Datensatz zugeordnet ist. |
TaskId | Zeichenfolge | Die ID des Tasks. |
TaskType | Zeichenfolge | Der Vorgangstyp. |
TenantId | Zeichenfolge | Die Log Analytics-Arbeitsbereichs-ID |
TimeGenerated | datetime | Der Zeitstempel (UTC), wann das Protokoll generiert wurde. |
type | Zeichenfolge | Der Name der Tabelle. |
UpdatedBlocks | long | Die Anzahl der aktualisierten Blöcke. |
UserSubscriptionId | Zeichenfolge | Die Abonnement-ID des Clusters, in dem die Aufgabe ausgeführt wird |
Feedback
https://aka.ms/ContentUserFeedback.
Bald verfügbar: Im Laufe des Jahres 2024 werden wir GitHub-Issues stufenweise als Feedbackmechanismus für Inhalte abbauen und durch ein neues Feedbacksystem ersetzen. Weitere Informationen finden Sie unterFeedback senden und anzeigen für