HDInsightSparkTaskEvents

Eventos de tarefas do Spark.

Atributos da tabela

Atributo Value
Tipos de recursos microsoft.hdinsight/clusters
Categorias Recursos do Azure
Soluções LogManagement
Log básico Não
Transformação do tempo de ingestão Sim
Consultas de Exemplo -

Colunas

Column Tipo Description
ApplicationId string O ID do aplicativo que produz o registro.
AttemptId string A ID da tentativa de tarefa.
_BilledSize real O tamanho do registo em bytes
BytesRead long O número de bytes lidos durante a tarefa.
BytesWritten long O número de bytes gravados pela tarefa.
ClusterDnsName string O nome DNS do cluster que executa a tarefa.
ClusterTenantId string A ID do locatário do cluster que executa a tarefa.
DiskBytesDerramado long O número de bytes de disco derramados.
Fim da Razão string Razão pela qual a tarefa terminou.
ExecutorCPUTime long O tempo da CPU consumido pelo executor da tarefa.
ExecutorDeserializeCPUTime long O tempo da CPU que o executor da tarefa passou desserializando.
ExecutorDeserializeTime long O tempo que o executor da tarefa gastou desserializando.
ExecutorId string O executor de ID.
ExecutorRunTime long O tempo que o executor da tarefa passou em execução.
Com falhas booleano Booleano descrevendo se a tarefa falhou.
Tempo de Término datetime A hora (UTC) a tarefa terminou.
Host string O FQDN do host que executa a tarefa.
InputMetrics long As métricas associadas à entrada da tarefa.
Endereço IP string O endereço IP do nó que executa a tarefa.
_IsBillable string Especifica se a ingestão dos dados é faturável. Quando _IsBillable é false ingerido, a não é cobrada na sua conta do Azure
JvmGcTime long O tempo que a JVM gastou coletando lixo.
Morto booleano Booleano descrevendo se a tarefa foi morta.
Tempo de Lançamento datetime A hora (UTC) em que a tarefa foi iniciada.
MemoryBytesSpilled long Os bytes de memória derramados.
NumUpdatedBlockStatuses long O número atualizado bloqueia os status durante a tarefa.
OutputMetrics long As métricas associadas à saída da tarefa.
PeakExecutionMemory long A quantidade de pico de memória usada durante a execução.
RegistosLer long O número de registros lidos durante a tarefa.
RegistrosEscritos long O número de registros gravados pela tarefa.
País/Região string A região do cluster que executa a tarefa.
_ResourceId string Um identificador exclusivo para o recurso ao qual o registro está associado
ResultSerializationTime long O tempo de serialização gasto ao obter o resultado.
ResultSize long Tamanho do resultado.
Role string O tipo de nó que executa a tarefa.
SchedulerDelay long A quantidade de atraso que o agendador experimentou.
ShuffleBytesWritten long Os bytes gravados durante a tarefa de embaralhar.
ShuffleFetchWaitTime long O tempo gasto à espera de ir buscar.
ShuffleLocalBlocksFetched long O número de blocos locais fethceded durante a tarefa shuffle.
ShuffleReadMetrics long As métricas associadas ao shuffle são lidas.
ShuffleRecordsEscrito long O número de registros gravados durante a tarefa de embaralhar.
ShuffleRemoteBlocksFetched long O número de blocos remotos fethceded durante a tarefa shuffle.
ShuffleTotalBlocksFetched long O número de blocos fethceded durante a tarefa shuffle.
ShuffleTotalBytesRead long O número de bytes lidos durante a tarefa de embaralhar.
ShuffleWriteMetrics long As métricas associadas às gravações aleatórias.
ShuffleWriteTime long O tempo gasto escrevendo durante a tarefa de embaralhar.
SourceSystem string O tipo de agente pelo qual o evento foi coletado. Por exemplo, OpsManager para o agente do Windows, conexão direta ou Operations Manager, Linux para todos os agentes Linux ou Azure para o Diagnóstico do Azure
StageId string A ID do estágio associado à tarefa.
_SubscriptionId string Um identificador exclusivo para a assinatura à qual o registro está associado
TaskId string A ID da tarefa.
Tipo de tarefa string O tipo de tarefa.
TenantId cadeia O ID do espaço de trabalho do Log Analytics
TimeGenerated datetime O carimbo de data/hora (UTC) de quando o log foi gerado.
Type string O nome da tabela
UpdatedBlocks long O número de blocos atualizados.
UserSubscriptionId string A ID de assinatura do cluster que executa a tarefa