Freigeben über

Anzeigen von Modelldetails des Orchestrierungsworkflows

  • Artikel

Nachdem das Modelltraining abgeschlossen ist, können Sie Ihre Modelldetails anzeigen und sehen, wie gut es mit dem Testsatz abschneidet. Das Beobachten der Leistung Ihres Modells wird als Auswertung bezeichnet. Der Testsatz besteht aus Daten, die während des Trainingsprozesses nicht in das Modell eingeflossen sind.

Hinweis

Die Verwendung der Option Automatisches Aufteilen des Testsatzes aus Trainingsdaten kann bei jedem Trainieren eines neuen Modells zu unterschiedlichen Ergebnissen bei der Modellauswertung führen, da der Testsatz nach dem Zufallsprinzip aus Ihren Äußerungen ausgewählt wird. Um sicherzustellen, dass die Auswertung bei jedem Trainieren eines Modells auf Grundlage des gleichen Testsatzes erfolgt, verwenden Sie beim Starten eines Trainingsauftrags unbedingt die Option Manuelle Aufteilung von Trainings- und Testdaten verwenden, und definieren Sie beim Hinzufügen Ihrer Äußerungen Ihren Testsatz.

Voraussetzungen

Vor dem Anzeigen der Modellauswertung benötigen Sie Folgendes:

Weitere Informationen finden Sie unter Lebenszyklus der Projektentwicklung.

Modelldetails

Auf der Seite Modelldetails anzeigen können Sie alle Ihre Modelle mit ihrem aktuellen Trainingsstatus und dem Datum des letzten Trainings anzeigen.

  1. Wechseln Sie in Language Studio zu Ihrer Projektseite.

  2. Wählen Sie im Menü auf der linken Seite des Bildschirms Modellleistung aus.

  3. Auf dieser Seite können Sie nur die erfolgreich trainierten Modelle, den F1-Score aller Modelle und das Modellablaufdatum anzeigen. Sie können den Modellnamen auswählen, um weitere Details zur Leistung anzuzeigen.

  4. Die Auswertungsmetriken auf Modellebene und Bewertungsmetriken auf Absichtsebene finden Sie unter Übersicht. Weitere Informationen finden Sie unter Auswertungsmetriken.

    Screenshot der Modellleistungsmetriken in Language Studio

  5. Die Konfusionsmatrix für das Modell befindet sich unter Testsatz-Konfusionsmatrix. Sie können die Konfusionsmatrix für Absichten sehen.

    Hinweis

    Wenn Sie hier keine der Absichten sehen, die Sie in Ihrem Modell verwenden, liegt das daran, dass sie in keiner der Äußerungen enthalten waren, die für den Testsatz verwendet wurden.

Laden oder Exportieren von Modelldaten

So laden Sie Modelldaten:

  1. Wählen Sie ein beliebiges Modell auf der Seite der Modellauswertung aus.

  2. Wählen Sie die Schaltfläche Modelldaten laden aus.

  3. Vergewissern Sie sich, dass Sie keine ungespeicherten Änderungen haben, die Sie in dem nun erscheinenden Fenster erfassen müssen, und wählen Sie Daten laden.

  4. Warten Sie, bis die Modelldaten wieder in Ihr Projekt geladen sind. Nach Abschluss werden Sie zurück zur Seite Schema-Entwurf geleitet.

So exportieren Sie Modelldaten:

  1. Wählen Sie ein beliebiges Modell auf der Seite der Modellauswertung aus.

  2. Wählen Sie die Schaltfläche Modelldaten exportieren aus. Warten Sie, bis die JSON-Momentaufnahme Ihres Modells lokal heruntergeladen wird.

Löschen des Modells

So löschen Sie Ihr Modell über Language Studio:

  1. Wählen Sie im linken Menü Modellleistung aus.

  2. Wählen Sie den Modellnamen aus, den Sie löschen möchten, und wählen Sie dann im oberen Menü die Option Löschen aus.

  3. Wählen Sie im angezeigten Fenster OK aus, um das Modell zu löschen.

Nächste Schritte

  • Wenn Sie die Leistung Ihres Modells überprüfen, sollten Sie sich über die zugrunde liegenden Auswertungsmetriken informieren.
  • Wenn Sie mit ihrer Modellleistung zufrieden sind, können Sie Ihr Modell bereitstellen.