Wyświetlanie oceny i szczegółów niestandardowego modelu NER
Po zakończeniu trenowania modelu można wyświetlić wydajność modelu i wyświetlić wyodrębnione jednostki dla dokumentów w zestawie testowym.
Uwaga
Użycie opcji Automatyczne dzielenie zestawu testów z danych treningowych może spowodować, że podczas trenowania nowego modelu wynik oceny modelu jest wybierany losowo z danych. Aby upewnić się, że ewauacja jest obliczana na tym samym zestawie testowym za każdym razem, gdy trenujesz model, należy użyć opcji Użyj ręcznego podziału danych treningowych i testowych podczas uruchamiania zadania trenowania i definiowania dokumentów testowych podczas etykietowania danych.
Wymagania wstępne
Przed wyświetleniem oceny modelu potrzebne są następujące elementy:
- Pomyślnie utworzono projekt ze skonfigurowanym kontem usługi Azure Blob Storage.
- Dane tekstowe przekazane do konta magazynu.
- Dane oznaczone etykietami
- Pomyślnie wytrenowany model
Aby uzyskać więcej informacji, zobacz cykl projektowania projektu .
Szczegóły modelu
Przejdź do strony projektu w programie Language Studio.
Wybierz pozycję Wydajność modelu z menu po lewej stronie ekranu.
Na tej stronie można wyświetlić tylko pomyślnie wytrenowane modele, wynik F1 dla każdego modelu i daty wygaśnięcia modelu. Możesz wybrać nazwę modelu, aby uzyskać więcej szczegółowych informacji na temat jej wydajności.
Uwaga
Jednostki, które nie są oznaczone ani przewidywane w zestawie testów, nie będą częścią wyświetlanych wyników.
- Omówienie
- Wydajność typu jednostki
- Szczegóły zestawu testów
- Dystrybucja zestawu danych
- Macierz pomyłek
Na tej karcie można wyświetlić szczegóły modelu, takie jak: wynik F1, precyzja, kompletność, data i godzina zadania trenowania, łączny czas trenowania oraz liczba dokumentów szkoleniowych i testowych uwzględnionych w tym zadaniu szkoleniowym.
Zobaczysz również wskazówki dotyczące ulepszania modelu. Po kliknięciu szczegółów widoku zostanie otwarty panel boczny, aby uzyskać więcej wskazówek dotyczących ulepszania modelu. W tym przykładzie jednostki KredytobiorcaAddress i KredytobiorcaName są mylone z jednostką $none . Klikając jednostki zdezorientowane, nastąpi przekierowanie do strony etykietowania danych w celu etykietowania większej ilości danych z prawidłową jednostką.
Dowiedz się więcej na temat wskazówek dotyczących modelu i macierzy pomyłek w pojęciach dotyczących wydajności modelu .
Ładowanie lub eksportowanie danych modelu
Aby załadować dane modelu:
Wybierz dowolny model na stronie oceny modelu .
Wybierz przycisk Załaduj dane modelu .
Upewnij się, że nie masz żadnych niezapisanych zmian, które należy przechwycić w wyświetlonym oknie, i wybierz pozycję Załaduj dane.
Poczekaj, aż dane modelu zakończą ładowanie z powrotem do projektu. Po zakończeniu nastąpi przekierowanie z powrotem do strony Projekt schematu .
Aby wyeksportować dane modelu:
Wybierz dowolny model na stronie oceny modelu .
Wybierz przycisk Eksportuj dane modelu . Poczekaj, aż migawka JSON modelu zostanie pobrana lokalnie.
Usuwanie modelu
Aby usunąć model z poziomu programu Language Studio:
Wybierz pozycję Wydajność modelu z menu po lewej stronie.
Wybierz nazwę modelu , którą chcesz usunąć, a następnie wybierz pozycję Usuń z górnego menu.
W wyświetlonym oknie wybierz przycisk OK , aby usunąć model.
Następne kroki
- Wdrażanie modelu
- Dowiedz się więcej o metrykach używanych w ocenie.