Informazioni di riferimento per i dati di monitoraggio di Azure Data Factory

Questo articolo contiene tutte le informazioni di riferimento sul monitoraggio per questo servizio.

Vedere Monitorare Data Factory per informazioni dettagliate sui dati che è possibile raccogliere per Azure Data Factory e su come usarli.

Metrica

Questa sezione elenca tutte le metriche della piattaforma raccolte automaticamente per questo servizio. Queste metriche fanno anche parte dell'elenco globale di tutte le metriche della piattaforma supportate nel Monitoraggio di Azure.

Per informazioni sulla conservazione delle metriche, vedere Informazioni generali sulle metriche del Monitoraggio di Azure.

Metriche supportate per Microsoft.DataFactory/datafactories

Nella tabella seguente sono elencate le metriche disponibili per il tipo di risorsa Microsoft.DataFactory/datafactories.

• Potrebbero non essere presenti tutte le colonne in ogni tabella.
• Alcune colonne potrebbero superare l'area di visualizzazione della pagina. Selezionare Espandi tabella per visualizzare tutte le colonne disponibili.

Intestazioni di tabella

• Categoria: gruppo o classificazione delle metriche.
• Metrica: nome visualizzato della metrica come visualizzato nella portale di Azure.
• Nome nell'API REST: nome della metrica indicato nell'API REST.
• Unità: Unità di misura.
• Aggregazione: tipo di aggregazione predefinito. Valori validi: Medio (Avg), Minimo (Min), Massimo (Max), Totale (Sum), Conteggio.
• Dimensioni - Dimensioni disponibili per la metrica.
• Intervalli di tempo - Intervalli in cui viene campionata la metrica. Ad esempio, PT1M indica che la metrica viene campionata ogni minuto, PT30M ogni 30 minuti, PT1H ogni ora e così via.
• Esportazione DS: indica se la metrica è esportabile nei log di Monitoraggio di Azure tramite le impostazioni di diagnostica. Per informazioni sull'esportazione delle metriche, vedere Creare impostazioni di diagnostica nel Monitoraggio di Azure.

Metriche supportate per Microsoft.DataFactory/factory

La tabella seguente elenca le metriche disponibili per il tipo di risorsa Microsoft.DataFactory/factory.

• Potrebbero non essere presenti tutte le colonne in ogni tabella.
• Alcune colonne potrebbero superare l'area di visualizzazione della pagina. Selezionare Espandi tabella per visualizzare tutte le colonne disponibili.

Intestazioni di tabella

• Categoria: gruppo o classificazione delle metriche.
• Metrica: nome visualizzato della metrica come visualizzato nella portale di Azure.
• Nome nell'API REST: nome della metrica indicato nell'API REST.
• Unità: Unità di misura.
• Aggregazione: tipo di aggregazione predefinito. Valori validi: Medio (Avg), Minimo (Min), Massimo (Max), Totale (Sum), Conteggio.
• Dimensioni - Dimensioni disponibili per la metrica.
• Intervalli di tempo - Intervalli in cui viene campionata la metrica. Ad esempio, PT1M indica che la metrica viene campionata ogni minuto, PT30M ogni 30 minuti, PT1H ogni ora e così via.
• Esportazione DS: indica se la metrica è esportabile nei log di Monitoraggio di Azure tramite le impostazioni di diagnostica. Per informazioni sull'esportazione delle metriche, vedere Creare impostazioni di diagnostica nel Monitoraggio di Azure.

Dimensioni delle metriche

Per informazioni sulle dimensioni delle metriche, vedere Metriche multidimensionali.

Questo servizio ha le dimensioni seguenti associate alle relative metriche.

Microsoft.DataFactory/datafactories

• pipelineName
• activityName

Microsoft.DataFactory/factories

• ActivityType
• PipelineName
• FailureType
• Nome
• IntegrationRuntimeName
• ContainerName
• DagFile
• DagId
• ComputeNodeSize
• Mansione
• Operatore
• Pool
• TaskId
• Provincia
• NodeName
• CancelledBy
• RunId

Log risorse

Questa sezione elenca i tipi di log delle risorse che si possono raccogliere per questo servizio. La sezione esegue il pull dall'elenco di tutti i tipi di categoria dei log delle risorse supportati nel Monitoraggio di Azure.

Log delle risorse supportati per Microsoft.DataFactory/factory

Tabelle di log di Monitoraggio di Azure

Questa sezione elenca tutte le tabelle dei log del Monitoraggio di Azure pertinenti a questo servizio che sono disponibili per la query da parte di Log Analytics mediante le query di Kusto. Le tabelle contengono i dati dei log delle risorse ed eventualmente altro, a seconda di ciò che viene raccolto e indirizzato verso di esse.

Data factory

Microsoft.DataFactory/factories

• AzureActivity
• AzureMetrics
• AzureDiagnostics
• ADFActivityRun
• ADFPipelineRun
• ADFTriggerRun
• ADFSandboxActivityRun
• ADFSandboxPipelineRun
• ADFSSISIntegrationRuntimeLogs
• ADFSSISPackageEventMessageContext
• ADFSSISPackageEventMessages
• ADFSSISPackageExecutableStatistics
• ADFSSISPackageExecutionComponentPhases
• ADFSSISPackageExecutionDataStatistics

Monitorare e gli schemi di Log Analytics per i log e gli eventi

Questa sezione elenca gli attributi usati dagli schemi di Monitoraggio di Azure e Log Analytics per il monitoraggio di log ed eventi.

Log Analytics eredita lo schema da Monitoraggio di Azure con le eccezioni seguenti:

• La prima lettera in ogni nome di colonna viene maiuscola. Ad esempio, il nome della colonna correlationId in Monitoraggio è CorrelationId in Log Analytics.

• Non è presente alcuna colonna Level .

• La colonna delle proprietà dinamiche viene mantenuta come tipo di BLOB JSON dinamico seguente.

  Colonna di Monitoraggio di Azure	Colonna di Log Analytics	Type
  $.properties. Proprietà utente	Proprietà utente	Dinamico
  $.properties. Annotazioni	Annotazioni	Dinamico
  $.properties. Immissione	Input	Dinamico
  $.properties. Prodotto	Output	Dinamico
  $.properties. Error.errorCode	ErrorCode	int
  $.properties. Error.message	ErrorMessage	string
  $.properties. Errore	Error	Dinamico
  $.properties. Predecessori	Attività precedenti	Dinamico
  $.properties. Parametri	Parametri	Dinamico
  $.properties. SystemParameters	SystemParameters	Dinamico
  $.properties. Tag	Tag	Dinamico

Attributi del log di esecuzione dell'attività

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "activityRunId":"",
   "pipelineRunId":"",
   "resourceId":"",
   "category":"ActivityRuns",
   "level":"Informational",
   "operationName":"",
   "pipelineName":"",
   "activityName":"",
   "start":"",
   "end":"",
   "properties":
       {
          "Input": "{
              "source": {
                "type": "BlobSource"
              },
              "sink": {
                "type": "BlobSink"
              }
           }",
          "Output": "{"dataRead":121,"dataWritten":121,"copyDuration":5,
               "throughput":0.0236328132,"errors":[]}",
          "Error": "{
              "errorCode": "null",
              "message": "null",
              "failureType": "null",
              "target": "CopyBlobtoBlob"
        }
    }
}

Attributi del log di esecuzione della pipeline

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "runId":"",
   "resourceId":"",
   "category":"PipelineRuns",
   "level":"Informational",
   "operationName":"",
   "pipelineName":"",
   "start":"",
   "end":"",
   "status":"",
   "location": "",
   "properties":
    {
      "Parameters": {
        "<parameter1Name>": "<parameter1Value>"
      },
      "SystemParameters": {
        "ExecutionStart": "",
        "TriggerId": "",
        "SubscriptionId": ""
      },
      "Predecessors": [
            {
                "Name": "",
                "Id": "",
                "InvokedByType": ""
            }
        ]
    }
}

Attributi del log di esecuzione del trigger

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "triggerId":"",
   "resourceId":"",
   "category":"TriggerRuns",
   "level":"Informational",
   "operationName":"",
   "triggerName":"",
   "triggerType":"",
   "triggerEvent":"",
   "start":"",
   "status":"",
   "properties":
   {
      "Parameters": {
        "TriggerTime": "",
       "ScheduleTime": ""
      },
      "SystemParameters": {}
    }
}

Attributi del log del runtime di integrazione SSIS

Di seguito sono riportati gli attributi di log delle operazioni di avvio, arresto e manutenzione di SQL Server Integration Services (SSIS).

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "resultType": "",
   "properties": {
      "message": ""
   },
   "resourceId": ""
}

Attributi del log del contesto del messaggio di evento SSIS

Ecco gli attributi di log delle condizioni correlate ai messaggi di evento generati dalle esecuzioni di pacchetti SSIS nel runtime di integrazione SSIS. Forniscono informazioni simili come una tabella o una vista del contesto del messaggio di evento SSIS (SSISDB) che mostra i valori di runtime di molte proprietà del pacchetto SSIS. Vengono generati quando si seleziona Basic/Verbose il livello di registrazione ed è utile per il debug o il controllo della conformità.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "operationId": "",
      "contextDepth": "",
      "packagePath": "",
      "contextType": "",
      "contextSourceName": "",
      "contextSourceId": "",
      "propertyName": "",
      "propertyValue": ""
   },
   "resourceId": ""
}

Attributi del log dei messaggi eventi SSIS

Ecco gli attributi di log dei messaggi di evento generati dalle esecuzioni di pacchetti SSIS nel runtime di integrazione SSIS. Trasmettono informazioni simili come una tabella o una vista dei messaggi di evento SSISDB che mostra il testo dettagliato o i metadati dei messaggi di evento. Vengono generati a qualsiasi livello di registrazione, ad eccezione Nonedi .

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "operationId": "",
      "messageTime": "",
      "messageType": "",
      "messageSourceType": "",
      "message": "",
      "packageName": "",
      "eventName": "",
      "messageSourceName": "",
      "messageSourceId": "",
      "subcomponentName": "",
      "packagePath": "",
      "executionPath": "",
      "threadId": ""
   }
}

Attributi del log delle statistiche eseguibili di SSIS

Ecco gli attributi di log delle statistiche eseguibili generate dalle esecuzioni di pacchetti SSIS nel runtime di integrazione SSIS, in cui i file eseguibili sono contenitori o attività nel flusso di controllo dei pacchetti. Forniscono informazioni simili come una tabella o una vista delle statistiche eseguibili di SSISDB che mostra una riga per ogni eseguibile in esecuzione, incluse le relative iterazioni. Vengono generati a qualsiasi livello di registrazione tranne None e utili per identificare colli di bottiglia o errori a livello di attività.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "executionPath": "",
      "startTime": "",
      "endTime": "",
      "executionDuration": "",
      "executionResult": "",
      "executionValue": ""
   },
   "resourceId": ""
}

Attributi del log delle fasi del componente di esecuzione SSIS

Ecco gli attributi di log delle statistiche di runtime per i componenti del flusso di dati generati dalle esecuzioni di pacchetti SSIS nel runtime di integrazione SSIS. Forniscono informazioni simili come una tabella o una vista del componente di esecuzione SSISDB che mostra il tempo impiegato dai componenti del flusso di dati in tutte le fasi di esecuzione. Vengono generati quando si seleziona Performance/Verbose il livello di registrazione ed è utile per acquisire le statistiche di esecuzione del flusso di dati.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "packageName": "",
      "taskName": "",
      "subcomponentName": "",
      "phase": "",
      "startTime": "",
      "endTime": "",
      "executionPath": ""
   },
   "resourceId": ""
}

Attributi del log delle statistiche dei dati di esecuzione SSIS

Ecco gli attributi di log degli spostamenti dei dati attraverso ogni fase delle pipeline del flusso di dati, da upstream a componenti downstream, generati dalle esecuzioni di pacchetti SSIS nel runtime di integrazione SSIS. Forniscono informazioni simili come una tabella o una vista delle statistiche di esecuzione di SSISDB che mostra i conteggi delle righe dei dati spostati tramite le attività del flusso di dati. Vengono generati quando si seleziona Verbose il livello di registrazione e risulta utile per il calcolo della velocità effettiva del flusso di dati.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "packageName": "",
      "taskName": "",
      "dataflowPathIdString": "",
      "dataflowPathName": "",
      "sourceComponentName": "",
      "destinationComponentName": "",
      "rowsSent": "",
      "createdTime": "",
      "executionPath": ""
   },
   "resourceId": ""
}

Log attività

Nella tabella collegata sono elencate le operazioni che possono essere registrate nel log attività per questo servizio. Queste operazioni sono un sottoinsieme di tutte le possibili operazioni del provider di risorse nel log attività.

Per altre informazioni sullo schema delle voci del log attività, vedere Schema del log attività.

• Operazioni del provider di risorse Microsoft.DataFactory

Contenuto correlato

• Monitorare Data Factory
• Monitorare le risorse di Azure con Monitoraggio di Azure
• Monitorare a livello di codice gli SDK