Schnellstart: Erstellen eines Apache Airflow-Auftrags

  • Artikel

Hinweis

Ein Apache Airflow-Auftrag wird von Apache Airflow unterstützt.
Apache Airflow ist eine Open-Source-Plattform, die zum programmgesteuerten Erstellen, Planen und Überwachen komplexer Aufträge verwendet wird. Es ermöglicht Ihnen, eine Reihe von Aufgaben zu definieren, die als Operatoren bezeichnet werden und zu gerichteten azyklischen Graphen (Directed Acyclic Graphs, DAGs) kombiniert werden können, um Datenpipelines darzustellen.

Apache Airflow-Aufträge bieten einen einfachen und effizienten Weg, um Apache Airflow-Umgebungen zu erstellen und zu verwalten, sodass Sie Ihre Orchestrierungsaufträge in großem Stil problemlos ausführen können. In diesem Schnellstart erstellen wir einen einfachen Apache Airflow-Auftrag, sodass Sie sich mit der Umgebung und den Funktionen von Apache Airflow-Aufträgen vertraut machen können.

Voraussetzungen

  • Aktivieren Sie den Apache Airflow-Auftrag in Ihrem Mandanten.

Hinweis

Da sich der Apache Airflow-Auftrag in der Vorschau befindet, müssen Sie ihn über Ihren Mandantenadministrator aktivieren. Wenn der Apache Airflow-Auftrag bereits angezeigt wird, hat Ihr Mandantenadministrator ihn möglicherweise bereits aktiviert.

  1. Gehen Sie zum Verwaltungsportal –> Mandanteneinstellungen –> Erweitern Sie unter Microsoft Fabric –> den Abschnitt „Benutzer können Apache Airflow-Aufträge erstellen und verwenden (Vorschau)“.
  2. Wählen Sie Übernehmen.

Screenshot zum Aktivieren von Apache Airflow im Mandanten.

Erstellen eines Apache Airflow-Auftrags

  1. Sie können einen vorhandenen Arbeitsbereich verwenden oder einen Neuen Arbeitsbereich erstellen.

  2. Erweitern Sie das + New Dropdown – > Klicken Sie auf Weitere Optionen –> Wählen Sie unter dem Abschnitt Data Factory –> Apache Airflow-Auftrag (Vorschau) aus

    Screenshot zeigt Klicken Sie auf mehr Optionen.

    Screenshot zum Auswählen des Apache Airflow-Auftrags.

  3. Geben Sie Ihrem Projekt einen geeigneten Namen und klicken Sie auf die Schaltfläche Erstellen.

Erstellen einer DAG-Datei

  1. Klicken Sie auf die Karte Neue DAG-Datei – > geben Sie der Datei den Namen, und klicken Sie auf die Schaltfläche Erstellen.

    Screenshot zum Benennen der DAG-Datei.

  2. Ihnen wird ein DAG-Code mit Textbausteinen angezeigt. Sie können die Datei nach Ihren Wünschen bearbeiten.

    Der Screenshot zeigt eine Standard-DAG-Datei in Microsoft Fabric.

  3. Klicken Sie auf das Symbol „Speichern“.

    Screenshot zeigt, wie die DAG-Datei in Microsoft Fabric gespeichert wird.

Ausführen einer DAG

  1. Klicken Sie zunächst auf die Schaltfläche DAG ausführen.

    Screenshot zum Ausführen der DAG aus der Benutzeroberfläche von Datenworkflows.

  2. Nach dem Initiieren wird eine Benachrichtigung angezeigt, die angibt, dass die DAG ausgeführt wird.

  3. Um den Fortschritt der DAG-Ausführung zu überwachen, klicken Sie einfach im Benachrichtigungscenter auf Details anzeigen. Diese Aktion leitet Sie zur Apache Airflow UI um, wo Sie bequem den Status und Details der DAG-Ausführung nachverfolgen können.

    Screenshot zum Navigieren zur Apache Airflow-Benutzeroberfläche über das Benachrichtigungscenter.

Überwachen des Apache Airflow-DAG in der Benutzeroberfläche von Apache Airflow

Die gespeicherten Dag-Dateien werden in der Apache Airflow-Benutzeroberfläche geladen. Sie können sie überwachen, indem Sie auf die Schaltfläche „In Apache Airflow überwachen“ klicken.

Screenshot zum Überwachen der Airflow-DAG.

Der Screenshot zeigt die geladene Airflow-DAG.

Verwandte Inhalte