Azure Data Factory izleme verileri başvurusu

Bu makale, bu hizmetin tüm izleme başvuru bilgilerini içerir.

Azure Data Factory için toplayabileceğiniz veriler ve nasıl kullanılacağı hakkında ayrıntılı bilgi için bkz. Data Factory'yi izleme.

Ölçümler

Bu bölümde, bu hizmet için otomatik olarak toplanan tüm platform ölçümleri listelenir. Bu ölçümler, Azure İzleyici'de desteklenen tüm platform ölçümlerinin genel listesinin de bir parçasıdır.

Ölçüm saklama hakkında bilgi için bkz . Azure İzleyici Ölçümlerine genel bakış.

Microsoft.DataFactory/datafactories için desteklenen ölçümler

Aşağıdaki tabloda Microsoft.DataFactory/datafactories kaynak türü için kullanılabilen ölçümler listelanmaktadır.

• Tüm sütunlar her tabloda mevcut olmayabilir.
• Bazı sütunlar sayfanın görüntüleme alanının dışında olabilir. Kullanılabilir tüm sütunları görüntülemek için Tabloyu genişlet'i seçin.

Tablo başlıkları

• Kategori - Ölçüm grubu veya sınıflandırma.
• Ölçüm - Azure portalında göründüğü şekilde ölçüm görünen adı.
• REST API'deki ad - REST API'de bahsedilen ölçüm adı.
• Birim - Ölçü birimi.
• Toplama - Varsayılan toplama türü. Geçerli değerler: Ortalama (Ortalama), Minimum (Min), Maksimum (Maksimum), Toplam (Toplam), Sayı.
• - Ölçüm için kullanılabilen Boyutlar Boyutları.
• Ölçümün örneklendiği Zaman Dilimleri - Aralıkları. Örneğin, PT1M ölçümün dakikada bir, 30 dakikada bir, PT30M PT1H saatte bir vb. örneklendiğini gösterir.
• DS Dışarı Aktarma- Ölçümün tanılama ayarları aracılığıyla Azure İzleyici Günlüklerine aktarılıp aktarılmayacağı. Ölçümleri dışarı aktarma hakkında bilgi için bkz . Azure İzleyici'de tanılama ayarları oluşturma.

Microsoft.DataFactory/factory için desteklenen ölçümler

Aşağıdaki tabloda Microsoft.DataFactory/factory kaynak türü için kullanılabilen ölçümler listelanmaktadır.

• Tüm sütunlar her tabloda mevcut olmayabilir.
• Bazı sütunlar sayfanın görüntüleme alanının dışında olabilir. Kullanılabilir tüm sütunları görüntülemek için Tabloyu genişlet'i seçin.

Tablo başlıkları

• Kategori - Ölçüm grubu veya sınıflandırma.
• Ölçüm - Azure portalında göründüğü şekilde ölçüm görünen adı.
• REST API'deki ad - REST API'de bahsedilen ölçüm adı.
• Birim - Ölçü birimi.
• Toplama - Varsayılan toplama türü. Geçerli değerler: Ortalama (Ortalama), Minimum (Min), Maksimum (Maksimum), Toplam (Toplam), Sayı.
• - Ölçüm için kullanılabilen Boyutlar Boyutları.
• Ölçümün örneklendiği Zaman Dilimleri - Aralıkları. Örneğin, PT1M ölçümün dakikada bir, 30 dakikada bir, PT30M PT1H saatte bir vb. örneklendiğini gösterir.
• DS Dışarı Aktarma- Ölçümün tanılama ayarları aracılığıyla Azure İzleyici Günlüklerine aktarılıp aktarılmayacağı. Ölçümleri dışarı aktarma hakkında bilgi için bkz . Azure İzleyici'de tanılama ayarları oluşturma.

Ölçüm boyutları

Ölçüm boyutlarının ne olduğu hakkında bilgi için bkz . Çok boyutlu ölçümler.

Bu hizmet, ölçümleriyle ilişkilendirilmiş aşağıdaki boyutlara sahiptir.

Microsoft.DataFactory/datafactories

• pipelineName
• activityName

Microsoft.DataFactory/factory

• ActivityType
• PipelineName
• FailureType
• Veri Akışı Adı
• IntegrationRuntimeName
• ContainerName
• DagFile
• DagId
• ComputeNodeSize
• İş
• Operatör
• Havuz
• Görev Kimliği
• State
• NodeName
• İptal Edilen
• RunId

Kaynak günlükleri

Bu bölümde, bu hizmet için toplayabileceğiniz kaynak günlükleri türleri listelenmiştir. bölümü, Azure İzleyici'de desteklenen tüm kaynak günlükleri kategori türleri listesinden çekilir.

Microsoft.DataFactory/factory için desteklenen kaynak günlükleri

Azure İzleyici Günlükleri tabloları

Bu bölümde, Kusto sorguları kullanılarak Log Analytics tarafından sorgulanabilen bu hizmetle ilgili Azure İzleyici Günlükleri tabloları listelenmektedir. Tablolar, toplanan ve bunlara yönlendirilenlere bağlı olarak kaynak günlüğü verilerini ve büyük olasılıkla daha fazlasını içerir.

Veri fabrikaları

Microsoft.DataFactory/factory

• AzureActivity
• AzureMetrics
• AzureDiagnostics
• ADFActivityRun
• ADFPipelineRun
• ADFTriggerRun
• ADFSandboxActivityRun
• ADFSandboxPipelineRun
• ADFSSISIntegrationRuntimeLogs
• ADFSSISPackageEventMessageContext
• ADFSSISPackageEventMessages
• ADFSSISPackageExecutableStatistics
• ADFSSISPackageExecutionComponentPhases
• ADFSSISPackageExecutionDataStatistics

Günlükler ve olaylar için izleme ve Log Analytics şemaları

Bu bölümde, Azure İzleyici ve Log Analytics şemalarının günlükleri ve olayları izlemek için kullandığı öznitelikler listelenir.

Log Analytics, aşağıdaki özel durumlarla şemayı Azure İzleyici'den devralır:

• Her sütun adının ilk harfi büyük harfe ayrılmıştır. Örneğin, İzleyici'deki correlationId sütun adı Log Analytics'teki CorrelationId'dir.

• Düzey sütunu yok.

• Dinamik özellikler sütunu aşağıdaki dinamik JSON blob türü olarak korunur.

  Azure İzleyici sütunu	Log Analytics sütunu	Tür
  $.properties. UserProperties	UserProperties	Dinamik
  $.properties. Ek açıklama -ları	Ek Açıklamalar	Dinamik
  $.properties. Girdi	Giriş	Dinamik
  $.properties. Çıktı	Çıktı	Dinamik
  $.properties. Error.errorCode	ErrorCode	int
  $.properties. Hata.ileti	ErrorMessage	Dize
  $.properties. Hata	Hata	Dinamik
  $.properties. Öncüller	Öncüller	Dinamik
  $.properties. Parametre	Parametreler	Dinamik
  $.properties. SystemParameters	SystemParameters	Dinamik
  $.properties. Etiketler	Etiketler	Dinamik

Etkinlik çalıştırma günlüğü öznitelikleri

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "activityRunId":"",
   "pipelineRunId":"",
   "resourceId":"",
   "category":"ActivityRuns",
   "level":"Informational",
   "operationName":"",
   "pipelineName":"",
   "activityName":"",
   "start":"",
   "end":"",
   "properties":
       {
          "Input": "{
              "source": {
                "type": "BlobSource"
              },
              "sink": {
                "type": "BlobSink"
              }
           }",
          "Output": "{"dataRead":121,"dataWritten":121,"copyDuration":5,
               "throughput":0.0236328132,"errors":[]}",
          "Error": "{
              "errorCode": "null",
              "message": "null",
              "failureType": "null",
              "target": "CopyBlobtoBlob"
        }
    }
}

İşlem hattı çalıştırma günlük öznitelikleri

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "runId":"",
   "resourceId":"",
   "category":"PipelineRuns",
   "level":"Informational",
   "operationName":"",
   "pipelineName":"",
   "start":"",
   "end":"",
   "status":"",
   "location": "",
   "properties":
    {
      "Parameters": {
        "<parameter1Name>": "<parameter1Value>"
      },
      "SystemParameters": {
        "ExecutionStart": "",
        "TriggerId": "",
        "SubscriptionId": ""
      },
      "Predecessors": [
            {
                "Name": "",
                "Id": "",
                "InvokedByType": ""
            }
        ]
    }
}

Tetikleyici çalıştırma günlük öznitelikleri

{
   "Level": "",
   "correlationId":"",
   "time":"",
   "triggerId":"",
   "resourceId":"",
   "category":"TriggerRuns",
   "level":"Informational",
   "operationName":"",
   "triggerName":"",
   "triggerType":"",
   "triggerEvent":"",
   "start":"",
   "status":"",
   "properties":
   {
      "Parameters": {
        "TriggerTime": "",
       "ScheduleTime": ""
      },
      "SystemParameters": {}
    }
}

SSIS tümleştirme çalışma zamanı günlük öznitelikleri

SQL Server Integration Services (SSIS) tümleştirme çalışma zamanı (IR) başlatma, durdurma ve bakım işlemlerinin günlük öznitelikleri aşağıdadır.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "resultType": "",
   "properties": {
      "message": ""
   },
   "resourceId": ""
}

SSIS olay iletisi bağlam günlüğü öznitelikleri

SSIS IR'nizde SSIS paket yürütmeleri tarafından oluşturulan olay iletileriyle ilgili koşulların günlük öznitelikleri aşağıda verilmiştir. SSIS kataloğu (SSISDB) olay iletisi bağlam tablosu veya birçok SSIS paketi özelliğinin çalışma zamanı değerlerini gösteren görünümle benzer bilgileri aktarır. Bunlar, günlük düzeyi seçildiğinde Basic/Verbose oluşturulur ve hata ayıklama veya uyumluluk denetimi için kullanışlıdır.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "operationId": "",
      "contextDepth": "",
      "packagePath": "",
      "contextType": "",
      "contextSourceName": "",
      "contextSourceId": "",
      "propertyName": "",
      "propertyValue": ""
   },
   "resourceId": ""
}

SSIS olay iletileri günlük öznitelikleri

SSIS IR'nizde SSIS paket yürütmeleri tarafından oluşturulan olay iletilerinin günlük öznitelikleri aşağıdadır. Olay iletilerinin ayrıntılı metnini veya meta verilerini gösteren bir SSISDB olay iletileri tablosu veya görünümüyle benzer bilgileri aktarır. Bunlar dışında Noneherhangi bir günlük düzeyinde oluşturulur.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "operationId": "",
      "messageTime": "",
      "messageType": "",
      "messageSourceType": "",
      "message": "",
      "packageName": "",
      "eventName": "",
      "messageSourceName": "",
      "messageSourceId": "",
      "subcomponentName": "",
      "packagePath": "",
      "executionPath": "",
      "threadId": ""
   }
}

SSIS yürütülebilir istatistik günlüğü öznitelikleri

Burada, yürütülebilir dosyalar paketlerin denetim akışındaki kapsayıcılar veya görevler olan SSIS IR'nizde SSIS paket yürütmeleri tarafından oluşturulan yürütülebilir istatistiklerin günlük öznitelikleri yer alır. SSISDB yürütülebilir istatistik tablosu veya görünümüne benzer bilgiler iletir ve yinelemeleri de dahil olmak üzere çalıştırılan her yürütülebilir dosya için bir satır gösterir. Bunlar, görev düzeyi performans sorunlarını veya hatalarını tanımlamak için yararlı olan herhangi None bir günlük düzeyinde oluşturulur.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "executionPath": "",
      "startTime": "",
      "endTime": "",
      "executionDuration": "",
      "executionResult": "",
      "executionValue": ""
   },
   "resourceId": ""
}

SSIS yürütme bileşeni aşamaları günlük öznitelikleri

SSIS IR'nizde SSIS paket yürütmeleri tarafından oluşturulan veri akışı bileşenleri için çalışma zamanı istatistiklerinin günlük öznitelikleri aşağıdadır. Tüm yürütme aşamalarında veri akışı bileşenleri tarafından harcanan zamanı gösteren bir SSISDB yürütme bileşeni aşamaları tablosu veya görünümüyle benzer bilgileri aktarır. Günlük düzeyi seçildiğinde Performance/Verbose oluşturulur ve veri akışı yürütme istatistiklerini yakalamak için kullanışlıdır.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "packageName": "",
      "taskName": "",
      "subcomponentName": "",
      "phase": "",
      "startTime": "",
      "endTime": "",
      "executionPath": ""
   },
   "resourceId": ""
}

SSIS yürütme verileri istatistikleri günlük öznitelikleri

Aşağıda, SSIS IR'nizdeki SSIS paket yürütmeleri tarafından oluşturulan yukarı akıştan aşağı akış bileşenlerine kadar veri akışı işlem hatlarının her bir ayağı üzerinden veri hareketlerinin günlük öznitelikleri yer alır. SSISDB yürütme veri istatistikleri tablosu veya veri akışı görevleri arasında taşınan verilerin satır sayısını gösteren görünümle benzer bilgileri aktarır. Günlük düzeyi seçildiğinde Verbose oluşturulurlar ve veri akışı aktarım hızını hesaplama için kullanışlıdır.

{
   "time": "",
   "operationName": "",
   "category": "",
   "correlationId": "",
   "dataFactoryName": "",
   "integrationRuntimeName": "",
   "level": "",
   "properties": {
      "executionId": "",
      "packageName": "",
      "taskName": "",
      "dataflowPathIdString": "",
      "dataflowPathName": "",
      "sourceComponentName": "",
      "destinationComponentName": "",
      "rowsSent": "",
      "createdTime": "",
      "executionPath": ""
   },
   "resourceId": ""
}

Etkinlik günlüğü

Bağlı tablo, bu hizmetin etkinlik günlüğüne kaydedilebilecek işlemleri listeler. Bu işlemler, etkinlik günlüğündeki tüm olası kaynak sağlayıcısı işlemlerinin bir alt kümesidir.

Etkinlik günlüğü girdilerinin şeması hakkında daha fazla bilgi için bkz . Etkinlik Günlüğü şeması.

• Microsoft.DataFactory kaynak sağlayıcısı işlemleri

İlgili içerik

• Data Factory'i izleme
• Azure İzleyici ile Azure kaynaklarını izleme
• SDK'ları kullanarak program aracılığıyla izleme