Anzeigen der Auswertung und Details des Textklassifizierungsmodells

Nachdem das Training Ihres Modells abgeschlossen wurde, können Sie die Modellleistung und die vorhergesagten Klassen für die Dokumente im Testsatz anzeigen.

Hinweis

Die Verwendung der Option Automatically split the testing set from training data (Automatisches Aufteilen des Testsatzes aus den Trainingsdaten) kann bei jedem Trainieren eines neuen Modells zu unterschiedlichen Ergebnissen bei der Modellauswertung führen, da der Testsatz nach dem Zufallsprinzip aus den Daten ausgewählt wird. Um sicherzustellen, dass die Auswertung bei jedem Trainieren eines Modells auf der Grundlage des gleichen Testsatzes erfolgt, verwenden Sie beim Starten eines Trainingsauftrags unbedingt die Option Manuelle Aufteilung von Trainings- und Testdaten verwenden, und definieren Sie beim Bezeichnen von Daten Ihre Testdokumente.

Voraussetzungen

Vor dem Anzeigen der Modellbewertung benötigen Sie Folgendes:

Weitere Informationen finden Sie unter Lebenszyklus der Projektentwicklung.

Modelldetails

  1. Wechseln Sie in Language Studio zu Ihrer Projektseite.

  2. Wählen Sie im Menü auf der linken Seite des Bildschirms Modellleistung aus.

  3. Auf dieser Seite können Sie nur die erfolgreich trainierten Modelle, den F1-Score aller Modelle und das Modellablaufdatum anzeigen. Sie können den Modellnamen auswählen, um weitere Details zur Leistung anzuzeigen.

Hinweis

Klassen, die im Testsatz weder bezeichnet noch vorhergesagt sind, werden in den Ergebnissen nicht angezeigt.

  • Auf dieser Registerkarte können Sie die Details des Modells anzeigen, z. B. F1-Score, Genauigkeit, Rückruf, Datum und Uhrzeit für den Trainingsauftrag, gesamte Trainingszeit und Anzahl von Trainings- und Testdokumenten, die in diesem Trainingsauftrag enthalten sind.

    Screenshot der Seite „Übersicht“ für die Modellauswertung

  • Außerdem werden Ihnen Anleitungen zur Verbesserung des Modells angezeigt. Wenn Sie auf Details anzeigen klicken, wird ein Seitenpanel mit weiteren Anleitungen zur Verbesserung des Modells geöffnet. In diesem Beispiel gibt es im Trainingssatz nicht genügend Daten für diese Klassen. Außerdem wird im Trainingssatz nicht klar genug zwischen Klassentypen unterschieden, und zwei Klassen werden miteinander verwechselt. Durch Klicken auf die verwechselten Klassen werden Sie zur Seite Datenbeschriftung weitergeleitet, um weitere Daten mit der richtigen Klasse zu beschriften.

    Screenshot der Anleitungsseite für die Modellauswertung

    Weitere Informationen zu Modellanleitungen und zur Konfusionsmatrix finden Sie in den Konzepten zur Modellleistung.

Laden oder Exportieren von Modelldaten

So laden Sie Modelldaten:

  1. Wählen Sie ein beliebiges Modell auf der Seite der Modellauswertung aus.

  2. Wählen Sie die Schaltfläche Modelldaten laden aus.

  3. Vergewissern Sie sich, dass Sie keine ungespeicherten Änderungen haben, die Sie in dem nun erscheinenden Fenster erfassen müssen, und wählen Sie Daten laden.

  4. Warten Sie, bis die Modelldaten wieder in Ihr Projekt geladen sind. Nach Abschluss werden Sie zurück zur Seite Schema-Entwurf geleitet.

So exportieren Sie Modelldaten:

  1. Wählen Sie ein beliebiges Modell auf der Seite der Modellauswertung aus.

  2. Wählen Sie die Schaltfläche Modelldaten exportieren aus. Warten Sie, bis die JSON-Momentaufnahme Ihres Modells lokal heruntergeladen wird.

Löschen des Modells

So löschen Sie Ihr Modell über Language Studio:

  1. Wählen Sie im linken Menü Modellleistung aus.

  2. Wählen Sie den Modellnamen aus, den Sie löschen möchten, und wählen Sie dann im oberen Menü die Option Löschen aus.

  3. Wählen Sie im angezeigten Fenster OK aus, um das Modell zu löschen.

Nächste Schritte

Wenn Sie die Leistung Ihres Modells überprüfen, sollten Sie sich über die zugrunde liegenden Auswertungsmetriken informieren. Sobald Sie wissen, ob die Leistung Ihres Modells verbessert werden muss, können Sie mit der Verbesserung des Modells beginnen.