Het dashboard gebruiken om uw app te verbeteren
Belangrijk
LUIS wordt op 1 oktober 2025 buiten gebruik gesteld en vanaf 1 april 2023 kunt u geen nieuwe LUIS-resources meer maken. We raden u aan uw LUIS-toepassingen te migreren naar conversatietaalbegrip om te profiteren van continue productondersteuning en meertalige mogelijkheden.
Problemen met de intenties van uw getrainde app vinden en oplossen wanneer u voorbeelduitingen gebruikt. Het dashboard geeft algemene app-informatie weer, met hoogtepunten van intenties die moeten worden opgelost.
Dashboardanalyse controleren is een iteratief proces. Herhaal dit als u uw model wijzigt en verbetert.
Deze pagina bevat geen relevante analyse voor apps die geen voorbeelduitingen in de intenties hebben, ook wel patroon-apps genoemd.
Welke problemen kunnen worden opgelost vanuit het dashboard?
De drie problemen die in het dashboard zijn opgelost, zijn:
| Probleem | Grafiekkleur | Uitleg |
|---|---|---|
| Onevenwichtige gegevens | - | Dit gebeurt wanneer het aantal voorbeelduitingen aanzienlijk varieert. Alle intenties moeten ongeveer hetzelfde aantal voorbeelduitingen hebben, met uitzondering van de intentie None. Het mag slechts 10%-15% van de totale hoeveelheid uitingen in de app bevatten. Als de gegevens onevenwichtig zijn, maar de nauwkeurigheid van de intentie boven een bepaalde drempelwaarde ligt, wordt deze onevenwichtigheid niet gerapporteerd als een probleem. Begin met dit probleem. Dit kan de hoofdoorzaak zijn van de andere problemen. |
| Onduidelijke voorspellingen | Oranje | Dit gebeurt wanneer de hoogste intentie en de scores van de volgende intentie zo dicht bij elkaar liggen dat ze tijdens de volgende training kunnen worden gespiegeld vanwege negatieve steekproeven of meer voorbeelduitingen die aan de intentie zijn toegevoegd. |
| Onjuiste voorspellingen | Red | Dit gebeurt wanneer een voorbeelduiting niet wordt voorspeld voor de gelabelde intentie (de intentie waarin deze zich bevindt). |
De juiste voorspellingen worden weergegeven met de kleur blauw.
Het dashboard toont deze problemen, geeft aan welke intenties worden beïnvloed en stelt voor wat u moet doen om de app te verbeteren.
Voordat de app wordt getraind
Voordat u de app traint, bevat het dashboard geen suggesties voor oplossingen. Train uw app om deze suggesties te zien.
Uw publicatiestatus controleren
De kaart Publicatiestatus bevat informatie over de laatste publicatie van de actieve versie.
Controleer of de actieve versie de versie is die u wilt herstellen.
Hiermee worden ook alle externe services, gepubliceerde regio's en geaggregeerde eindpunttreffers weergegeven.
Evaluatie van training controleren
De trainingsevaluatiekaart bevat de geaggregeerde samenvatting van de algehele nauwkeurigheid van uw app per gebied. De score geeft de kwaliteit van de intentie aan.
De grafiek geeft de correct voorspelde intenties en de probleemgebieden met verschillende kleuren aan. Naarmate u de app verbetert met de suggesties, wordt deze score verhoogd.
De voorgestelde oplossingen zijn gescheiden op probleemtype en zijn het belangrijkst voor uw app. Als u liever problemen per intentie wilt bekijken en oplossen, gebruikt u de kaart Intenties met fouten onder aan de pagina.
Elk probleemgebied heeft intenties die moeten worden opgelost. Wanneer u de naam van de intentie selecteert, wordt de pagina Intent geopend met een filter dat is toegepast op de utterances. Met dit filter kunt u zich richten op de uitingen die het probleem veroorzaken.
Wijzigingen in verschillende versies vergelijken
Maak een nieuwe versie voordat u wijzigingen aanbrengt in de app. Breng in de nieuwe versie de voorgestelde wijzigingen aan in de voorbeelduitingen van de intentie en train opnieuw. Gebruik op de pagina Trainingsevaluatiekaart van het dashboard de optie Wijziging ten opzichte van de getrainde versie weergeven om de wijzigingen te vergelijken.
Versie herstellen door voorbeelduitingen toe te voegen of te bewerken en opnieuw te trainen
De primaire methode voor het herstellen van uw app is het toevoegen of bewerken van voorbeelduitingen en het opnieuw trainen. De nieuwe of gewijzigde utterances moeten de richtlijnen voor verschillende uitingen volgen.
Het toevoegen van voorbeelduitingen moet worden uitgevoerd door iemand die:
- heeft een hoge mate van begrip van welke utterances zijn in de verschillende intenties.
- weet hoe uitingen in de ene intentie kunnen worden verward met een andere intentie.
- kan bepalen of twee intenties, die vaak met elkaar worden verward, moeten worden samengevouwen tot één intentie. Als dit het geval is, moeten de verschillende gegevens worden opgehaald met entiteiten.
Patronen en woordgroepenlijsten
Op de analysepagina wordt niet aangegeven wanneer patronen of woordgroepenlijsten moeten worden gebruikt. Als u deze toevoegt, kan dit helpen bij onjuiste of onduidelijke voorspellingen, maar niet bij onevenwichtige gegevens.
Onevenwichtige gegevens controleren
Begin met dit probleem. Dit kan de hoofdoorzaak zijn van de andere problemen.
De lijst met intenties voor gegevensonbalans bevat intenties die meer uitingen nodig hebben om de onevenwichtige gegevens te corrigeren.
Ga als volgt te werk om dit probleem op te lossen:
- Voeg meer uitingen toe aan de intentie en train vervolgens opnieuw.
Voeg geen uitingen toe aan de intentie Geen, tenzij dit wordt voorgesteld op het dashboard.
Tip
Gebruik de derde sectie op de pagina, Utterances per intent met de instelling Utterances (getal), als een snelle visuele handleiding voor welke intenties meer utterances nodig hebben.
Onjuiste voorspellingen controleren
De lijst met onjuiste voorspellingsintenties bevat intenties met utterances, die worden gebruikt als voorbeelden voor een specifieke intentie, maar worden voorspeld voor verschillende intenties.
Ga als volgt te werk om dit probleem op te lossen:
- Bewerk utterances zodat deze specifieker zijn voor de intentie en train opnieuw.
- Combineer intenties als uitingen te nauw zijn uitgelijnd en train opnieuw.
Onduidelijke voorspellingen bekijken
De lijst met onduidelijke voorspellingsintenties toont intenties met utterances met voorspellingsscores die niet ver genoeg van hun dichtstbijzijnde rivaal liggen. De belangrijkste intentie voor de uiting kan tijdens de volgende training veranderen vanwege negatieve steekproeven.
Om dit probleem op te lossen;
- Bewerk utterances zodat deze specifieker zijn voor de intentie en train opnieuw.
- Combineer intenties als uitingen te nauw zijn uitgelijnd en train opnieuw.
Utterances per intent
Deze kaart toont de algemene app-status voor de intenties. Terwijl u intenties oplost en opnieuw gaat trainen, blijft u deze kaart bekijken voor problemen.
In de volgende grafiek ziet u een app met een goed evenwicht en er zijn bijna geen problemen om op te lossen.
In de volgende grafiek ziet u een slecht uitgebalanceerde app met veel problemen die moeten worden opgelost.
Beweeg de muisaanwijzer over de balk van elke intentie om informatie over de intentie op te halen.
Gebruik de functie Sorteren op om de intenties te rangschikken op probleemtype, zodat u zich kunt richten op de meest problematische intenties met dat probleem.
Intenties met fouten
Met deze kaart kunt u problemen voor een specifieke intentie bekijken. De standaardweergave van deze kaart is de meest problematische intenties, zodat u weet waar u zich moet richten.
Het bovenste ringdiagram toont de problemen met de intentie voor de drie probleemtypen. Als er problemen zijn in de drie probleemtypen, heeft elk type hieronder een eigen grafiek, samen met eventuele rivaliserende intenties.
Intenties filteren op probleem en percentage
In deze sectie van de kaart kunt u voorbeelduitingen vinden die buiten uw foutdrempel vallen. Idealiter wilt u dat de juiste voorspellingen significant zijn. Dat percentage is bedrijfs- en klantgestuurd.
Bepaal de drempelwaardepercentages waarmee u vertrouwd bent voor uw bedrijf.
Met het filter kunt u intenties met een specifiek probleem vinden:
| Filter | Voorgesteld percentage | Doel |
|---|---|---|
| Meest problematische intenties | - | Begin hier : het oplossen van de utterances in deze intentie zal de app meer verbeteren dan andere oplossingen. |
| Corrigeer onderstaande voorspellingen | 60% | Dit is het percentage utterances in de geselecteerde intentie dat juist is, maar een betrouwbaarheidsscore onder de drempelwaarde heeft. |
| Onduidelijke voorspellingen hierboven | 15% | Dit is het percentage utterances in de geselecteerde intentie dat wordt verward met de dichtstbijzijnde rivaliserende intentie. |
| Onjuiste voorspellingen hierboven | 15% | Dit is het percentage utterances in de geselecteerde intentie dat onjuist is voorspeld. |
Juiste voorspellingsdrempelwaarde
Wat is een betrouwbaarheidsscore voor u? Aan het begin van de app-ontwikkeling is 60% mogelijk uw doel. Gebruik de onderstaande juiste voorspellingen met het percentage van 60% om eventuele uitingen in de geselecteerde intentie te vinden die moeten worden opgelost.
Onduidelijke of onjuiste voorspellingsdrempelwaarde
Met deze twee filters kunt u utterances vinden in de geselecteerde intentie buiten de drempelwaarde. U kunt deze twee percentages zien als foutpercentages. Als u vertrouwd bent met een foutpercentage van 10-15% voor voorspellingen, stelt u de filterdrempelwaarde in op 15% om alle uitingen boven deze waarde te vinden.