Compartilhar via

AzureDiagnostics

  • Artigo

Armazena logs de recursos dos serviços do Azure que usam o modo de Diagnóstico do Azure. Os logs de recursos descrevem a operação interna dos recursos do Azure.

O log de recursos para cada serviço do Azure tem um conjunto exclusivo de colunas. A tabela AzureDiagnostics inclui as colunas mais comuns usadas pelos serviços do Azure. Se um log de recursos incluir uma coluna que ainda não existe na tabela AzureDiagnostics, essa coluna será adicionada na primeira vez que os dados forem coletados. Se o número máximo de 500 colunas for atingido, os dados de todas as colunas adicionais serão incluídos em uma coluna dinâmica.

Os serviços do Azure que usam o modo específico do recurso armazenam dados em uma tabela específica para esse serviço e não usam a tabela AzureDiagnostics. Consulte Tipos de recursos abaixo para obter os serviços que usam cada método. Consulte Logs de recursos do Azure para obter detalhes sobre as diferenças.

Coluna Campos Adicionais

Ao contrário de outras tabelas, o AzureDiagnostics é muito mais suscetível a exceder o limite de 500 colunas imposto para qualquer tabela em um espaço de trabalho do Log Analytics devido à ampla variedade de Recursos do Azure capazes de enviar dados para essa tabela. Para garantir que nenhum dado seja perdido devido ao número de colunas ativas que excedem esse limite de 500 colunas, a criação de colunas do AzureDiagnostics é tratada de maneira diferente de outras tabelas.

A tabela AzureDiagnostics em cada espaço de trabalho conterá, no mínimo, as mesmas 200 colunas. Para espaços de trabalho criados antes de 19 de janeiro de 2021, a tabela também conterá todas as colunas que já estavam em vigor antes desta data. Quando os dados são enviados para uma coluna que ainda não está no local:

  • Se o número total de colunas no AzureDiagnostics no espaço de trabalho atual não exceder 500, uma nova coluna será criada como em qualquer outra tabela.
  • Se o número total de colunas for igual ou superior a 500, os dados em excesso serão adicionados a uma coluna dinâmica do conjunto de propriedades chamada AdditionalFields como uma propriedade.

Exemplo

Para ilustrar esse comportamento, imagine que, a partir de (data de implantação), a tabela AzureDiagnostics em nosso workpsace tenha a seguinte aparência:

Coluna 1 Coluna 2 Coluna 3 ... Coluna 498
abc def 123 ... 456
... ... ... ... ...

Um recurso que envia dados para o AzureDiagnostics adiciona uma nova dimensão aos seus dados que eles chamam de NewInfo1. Como a tabela ainda tem menos de 500 colunas, a primeira vez que ocorrer um evento que contenha dados para essa nova dimensão adicionará uma nova coluna à tabela:

Coluna 1 Coluna 2 Coluna 3 ... Coluna 498 NewInfo1_s
abc def 123 ... 456 xyz
... ... ... ... ... ...

Você pode retornar esses novos dados em uma consulta simples:

AzureDiagnostics | where NewInfo1_s == "xyz"

Posteriormente, outro recurso envia dados para o AzureDiagnostics que adiciona novas dimensões chamadas NewInfo2 e NewInfo3. Como a tabela atingiu 500 colunas neste espaço de trabalho, os novos dados irão para a coluna AdditionalFields :

Coluna 1 Coluna 2 Coluna 3 ... Coluna 498 NewInfo1_s AdditionalFields
abc def 123 ... 456 xyz {"NewInfo2":"789","NewInfo3":"qwerty"}
... ... ... ... ... ... ...

Você ainda pode consultar esses dados, mas deve extraí-los do conjunto de propriedades usando qualquer um dos operadores de propriedades dinâmicas no KQL:

AzureDiagnostics
| where AdditionalFields.NewInfo2 == "789" and AdditionalFields.NewInfo3 == "qwerty"

Dicas sobre como usar a coluna ThirdalFields

Embora as práticas recomendadas gerais de consulta, como sempre filtrar por tempo como a primeira cláusula da consulta, devam ser seguidas, há algumas outras recomendações que você deve considerar ao trabalhar com AdditionalFields:

  • Você precisará digitar dados de transmissão de dados antes de executar outras operações neles. Por exemplo, se existir uma coluna chamada Perf1Sec_i bem como uma propriedade em AdditionalFields chamada Perf2Sec e você quiser calcular o perf total adicionando ambos os valores, use algo como: AzureDiagnostics | extend TotalPerfSec = Perf1Sec_i + toint(AdditionalFields.Perf2Sec) | .....
  • Use cláusulas where para reduzir o volume de dados ao menor possível antes de escrever qualquer lógica complexa para melhorar significativamente o desempenho. TimeGenerated é uma coluna que deve ser sempre reduzida à menor janela possível. No caso do AzureDiagnostics, um filtro adicional também deve sempre ser incluído na parte superior da consulta em torno dos tipos de recursos que estão sendo consultados usando a coluna ResourceType .
  • Ao consultar volumes muito grandes de dados, às vezes é mais eficiente fazer um filtro em AdditionalFields como um todo em vez de analisá-lo. Por exemplo, para grandes volumes de dados AzureDiagnostics | where AdditionalFields has "Perf2Sec" é muitas vezes mais eficiente do que AzureDiagnostics | where isnotnull(toint(AdditionalFields.Perf2Sec))o .

Modo de Diagnóstico do Azure

Os serviços a seguir usam o modo de diagnóstico do Azure para seus logs de recursos e enviam dados para a tabela de Diagnóstico do Azure.

  • Analysis Services
  • Gateways do Aplicativo
  • Contas de Automação
  • Banco de dados do Azure para MariaDB
  • Servidores do Banco de Dados do Azure para MySQL
  • Banco de Dados do Azure para servidores PostgreSQL
  • Banco de dados do Azure para servidores PostgreSQL v2
  • Contas do Lote
  • Perfis CDN
  • Serviços Cognitivos
  • Data Lake Analytics
  • Armazenamento DataLake Gen1
  • Serviços de Provisionamento de Dispositivos
  • Gêmeos Digitais
  • Tópicos de Grade de Eventos
  • Hubs de Eventos
  • Circuitos do ExpressRoute
  • Front Doors
  • Contas de integração
  • Key Vault
  • Serviços de Kubernetes
  • Balanceadores de carga
  • Aplicativos Lógicos
  • Serviços de mídia
  • Adaptadores de rede
  • Grupos de segurança de rede
  • Gateways de VPN P2S
  • Power BI Embedded
  • Endereços IP públicos
  • Cofres dos Serviços de Recuperação(Recuperação de Site)
  • Serviços Search
  • Barramento de Serviço
  • Bancos de dados SQL
  • Instâncias gerenciadas pelo SQL
  • Servidores SQL
  • Trabalhos do Stream Analytics
  • Perfis do Gerenciador de Tráfego
  • Redes virtuais
  • Gateways de rede virtual
  • Gateways VPN

Modo de Diagnóstico do Azure ou modo específico de recurso

Os serviços a seguir usam o modo de diagnóstico do Azure ou o modo específico de recurso para seus logs de recursos, dependendo de sua configuração. Quando eles usam o modo específico do recurso, eles não enviam dados para a tabela AzureDiagnostics. Consulte Logs de recursos do Azure para obter detalhes sobre essa configuração.

  • Serviços de gerenciamento de API
  • Azure Cosmos DB
  • Data factories (V2)
  • Hub IoT
  • Cofres dos Serviços de Recuperação(Backup)
  • Firewalls

Categorias

  • Recursos do Azure
  • Segurança
  • Rede

Soluções

  • LogManagement

Tipos de recurso

  • Gateways do Aplicativo
  • Perfis de CDN
  • Azure Cosmos DB
  • Tópicos de Grade de Eventos
  • Hubs de Eventos
  • Firewalls
  • Cofres de Chaves
  • Serviços Kubernetes
  • Cofres dos Serviços de Recuperação
  • Barramento de Serviço
  • Servidor flexível do Banco de Dados do Azure para MySQL
  • Banco de Dados do Azure para servidores flexíveis PostgreSQL
  • Serviços de Mídia
  • Analysis Services
  • Contas do Lote
  • Serviços Cognitivos
  • Namespaces do Parceiro da Grade de Eventos
  • Tópicos de Parceiro da Grade de Eventos
  • Tópicos do Sistema da Grade de Eventos
  • Kubernetes habilitado para Azure Arc
  • Clusters provisionados do Azure Arc
  • Hub IoT
  • Aplicativos Lógicos
  • Serviços de Gerenciamento de API
  • Conta de automação
  • Fábricas de Dados
  • Data Lake Storage Gen1
  • Data Lake Analytics
  • Power BI Embedded
  • Instâncias Gerenciadas de SQL
  • SQL Servers
  • Bancos de dados SQL
  • Banco de Dados do Azure para Servidores MySQL
  • Banco de Dados do Azure para servidores PostgreSQL
  • Banco de Dados do Azure para servidores PostgreSQL V2
  • Banco de Dados do Azure para Servidores MariaDB
  • Serviços de Provisionamento de Dispositivos
  • Circuitos do ExpressRoute
  • Front Doors
  • Interfaces de Rede
  • Grupos de segurança de rede
  • Endereços IP públicos
  • Perfis do Gerenciador de Tráfego
  • Gateways de Rede Virtual
  • Gateways de rede privada virtual
  • Redes Virtuais
  • Serviços de pesquisa
  • Trabalhos do Stream Analytics

Colunas

Coluna Type Descrição
action_id_s String
action_name_s String
action_s String
ActivityId_g Guid
AdditionalFields
AdHocOrScheduledJob_s String
application_name_s String
audit_schema_version_d Double
avg_cpu_percent_s String
avg_mean_time_s String
backendHostname_s String
Caller_s String
callerId_s String
CallerIPAddress String
calls_s String
Categoria String
client_ip_s String
clientInfo_s String
clientIP_s String
clientIp_s String
clientIpAddress_s String
clientPort_d Double
code_s String
collectionName_s String
conditions_destinationIP_s String
conditions_destinationPortRange_s String
conditions_None_s String
conditions_protocols_s String
conditions_sourceIP_s String
conditions_sourcePortRange_s String
CorrelationId String
count_executions_d Double
cpu_time_d Double
database_name_s String
database_principal_name_s String
DatabaseName_s String
db_id_s String
direction_s String
dop_d Double
duration_d Double
duration_milliseconds_d Double
DurationMs BigInt
ElasticPoolName_s String
endTime_t Datetime
Environment_s String
error_code_s String
error_message_s String
errorLevel_s String
event_class_s String
event_s String
event_subclass_s String
event_time_t Datetime
EventName_s String
execution_type_d Double
executionInfo_endTime_t Datetime
executionInfo_exitCode_d Double
executionInfo_startTime_t Datetime
host_s String
httpMethod_s String
httpStatus_d Double
httpStatusCode_d Double
httpStatusCode_s String
httpVersion_s String
id_s String
identity_claim_appid_g Guid
identity_claim_ipaddr_s String
instanceId_s String
interval_end_time_d Double
interval_start_time_d Double
ip_s String
is_column_permission_s String
isAccessPolicyMatch_b Bool
JobDurationInSecs_s String
JobFailureCode_s String
JobId_g Guid
jobId_s String
JobOperation_s String
JobOperationSubType_s String
JobStartDateTime_s String
JobStatus_s String
JobUniqueId_g Guid
Nível String
log_bytes_used_d Double
logical_io_reads_d Double
logical_io_writes_d Double
LogicalServerName_s String
macAddress_s String
matchedConnections_d Double
max_cpu_time_d Double
max_dop_d Double
max_duration_d Double
max_log_bytes_used_d Double
max_logical_io_reads_d Double
max_logical_io_writes_d Double
max_num_physical_io_reads_d Double
max_physical_io_reads_d Double
max_query_max_used_memory_d Double
max_rowcount_d Double
max_time_s String
mean_time_s String
Message String
min_time_s String
msg_s String
num_physical_io_reads_d Double
object_id_d Double
object_name_s String
OperationName String
OperationVersion String
partitionKey_s String
physical_io_reads_d Double
plan_id_d Double
policy_s String
policyMode_s String
primaryIPv4Address_s String
priority_d Double
properties_enabledForDeployment_b Bool
properties_enabledForDiskEncryption_b Bool
properties_enabledForTemplateDeployment_b Bool
properties_s String
properties_sku_Family_s String
properties_sku_Name_s String
properties_tenantId_g Guid
query_hash_s String
query_id_d Double
query_max_used_memory_d Double
query_plan_hash_s String
query_time_d Double
querytext_s String
receivedBytes_d Double
Region_s String
requestCharge_s String
requestQuery_s String
requestResourceId_s String
requestResourceType_s String
requestUri_s String
reserved_storage_mb_s String
Recurso String
resource_actionName_s String
resource_location_s String
resource_originRunId_s String
resource_resourceGroupName_s String
resource_runId_s String
resource_subscriptionId_g Guid
resource_triggerName_s String
resource_workflowId_g Guid
resource_workflowName_s String
ResourceGroup String
_ResourceId String Identificador exclusivo do recurso ao qual o registro está associado
ResourceProvider String
ResourceProvider String
ResourceType String
ResourceType String
response_rows_d Double
resultCode_s String
ResultDescription String
ResultDescription String
resultDescription_ChildJobs_s String
resultDescription_ErrorJobs_s String
resultMessage_s String
ResultSignature String
ResultType String
ResultType String
rootCauseAnalysis_s String
routingRuleName_s String
rowcount_d Double
ruleName_s String
RunbookName_s String
RunOn_s String
schema_name_s String
sentBytes_d Double
sequence_group_id_g Guid
sequence_number_d Double
server_principal_sid_s String
session_id_d Double