Partager via

Afficher l’évaluation et les détails du modèle NER personnalisé

  • Article

Une fois que votre modèle a terminé l’apprentissage, vous pouvez afficher les performances du modèle, ainsi que les entités extraites pour les documents du jeu de test.

Notes

L’utilisation de l’option Fractionner automatiquement le jeu de tests à partir des données d’apprentissage peut entraîner des résultats d’évaluation du modèle différents à chaque apprentissage d’un nouveau modèle, car le jeu de tests est sélectionné de manière aléatoire dans les données. Pour garantir que l’évaluation est calculée sur le même jeu de tests chaque fois que vous entraînez un modèle, veillez à utiliser l’option Utiliser un fractionnement manuel des données d’entraînement et de test quand vous démarrez un travail d’entraînement et définissez vos documents de test lors de l’étiquetage des données.

Prérequis

Avant d’afficher l’évaluation du modèle, vous avez besoin des éléments suivants :

Pour plus d’informations, consultez Cycle de vie de développement de projet.

Détails du modèle

  1. Accédez à la page de votre projet dans Langage Studio.

  2. Sélectionnez Performances du modèle dans le menu du côté gauche de l’écran.

  3. Dans cette page, vous pouvez uniquement afficher les modèles dont l’apprentissage a été effectué avec succès, le score F1 de chaque modèle et sa date d’expiration. Vous pouvez sélectionner le nom du modèle pour obtenir des détails supplémentaires sur ses performances.

Notes

Les entités qui ne sont ni étiquetées ni prédites dans le jeu de test ne font pas partie des résultats affichés.

  • Dans cet onglet, vous pouvez afficher les détails du modèle, tels que le score F1, la précision, le rappel, la date et l’heure du travail d’entraînement, le temps total d’entraînement et le nombre total de documents d’entraînement et de test inclus dans ce travail de formation.

    Une capture d’écran qui affiche la page de présentation de l'évaluation du modèle.

  • Vous verrez également des conseils sur la façon d’améliorer le modèle. Lorsque vous cliquez sur l’affichage des détails, un panneau latéral s’ouvre pour fournir des conseils supplémentaires sur la façon d’améliorer le modèle. Dans cet exemple, les entités BorrowerAddress et BorrowerName sont confondues avec l’entité $none. En cliquant sur les entités confondues, vous êtes dirigé vers la page Étiquetage des données pour étiqueter davantage de données avec la classe correcte.

    Une capture d'écran qui montre la page de conseils pour l'évaluation du modèle.

    En savoir plus sur les conseils de modèle et la matrice de confusion dans les concepts de performances du modèle.

Charger ou exporter des données de modèle

Pour charger vos données de modèle :

  1. Sélectionnez un modèle sur la page Évaluation du modèle.

  2. Sélectionnez le bouton Charger les données de modèle.

  3. Vérifiez que vous n’avez pas de modifications non enregistrées que vous avez besoin de garder dans la fenêtre qui s’affiche, puis sélectionnez Charger les données.

  4. Attendez que vos données de modèle finissent d’être chargées dans votre projet. Une fois terminé, vous êtes redirigé vers la page Conception de schéma.

Pour exporter vos données de modèle :

  1. Sélectionnez un modèle sur la page Évaluation du modèle.

  2. Sélectionnez le bouton Exporter les données de modèle. Attendez que l’instantané JSON de votre modèle soit téléchargé localement.

Supprimer le modèle

Pour supprimer votre modèle à partir de Language Studio :

  1. Sélectionnez Performances du modèle dans le menu du côté gauche.

  2. Sélectionnez le nom du modèle que vous souhaitez supprimer, puis Supprimer dans le menu supérieur.

  3. Dans la fenêtre qui s’affiche, sélectionnez OK pour supprimer le modèle.

Étapes suivantes