Hodnocení výslovnosti na portálu Microsoft Foundry

Důležité

Položky označené (Preview) v tomto článku jsou aktuálně ve verzi Public Preview. Tato verze Preview je poskytována bez smlouvy o úrovni služeb a nedoporučujeme ji pro produkční úlohy. Některé funkce se nemusí podporovat nebo mohou mít omezené možnosti. Další informace najdete v dodatečných podmínkách použití pro verze Preview v Microsoft Azure.

Hodnocení výslovnosti využívá funkci převodu řeči na text k poskytnutí subjektivní a objektivní zpětné vazby pro žáky jazyka. Cvičení výslovnosti a včasné zpětné vazby jsou nezbytné pro zlepšení jazykových dovedností. Hodnocení prováděná zkušenými učiteli mohou trvat hodně času a mohou být nákladná pro žáky. Hodnocení výslovnosti může pomoct, aby byl proces poutavější a přístupnější pro žáky všech pozadí.

Tento článek popisuje, jak používat nástroj pro posouzení výslovnosti bez psaní kódu prostřednictvím portálu Microsoft Foundry. Informace o tom, jak integrovat hodnocení výslovnosti v aplikacích pro řeč, najdete v tématu Jak používat hodnocení výslovnosti.

Poznámka:

Informace o dostupnosti hodnocení výslovnosti najdete v podporovaných jazycích a dostupných oblastech.

Scénáře čtení, mluvení a hraní her

Pro hodnocení výslovnosti existují tři scénáře: čtení, mluvení a hraní her.

  • Čtení: Tento scénář je určený pro skriptované posouzení. Vyžaduje, aby si studenti přečetli daný text. Referenční text je k dispozici předem.
  • Mluvení: Tento scénář je určený pro neskriptované hodnocení. Vyžaduje, aby studenti mluvili o daném tématu. Referenční text není k dispozici předem.
  • Hry: Tento scénář je určený pro skriptované posouzení. Vyžaduje, aby studenti přečetli jazykolam, aby získali body za výslovnost a za každou slabiku. Referenční text je k dispozici předem.

Provedení posouzení čtení

Pokud chcete vyhodnotit výslovnost referenčního textu, postupujte takto:

  1. Na portálu Microsoft Foundry přejděte na hodnocení výslovnosti.

    Snímek obrazovky znázorňuje, jak přejít k hodnocení výslovnosti v Microsoft Foundry

  2. Na kartě Čtení zvolte podporovaný jazyk, u kterého chcete vyhodnotit výslovnost.

    Snímek obrazovky s výběrem podporovaného jazyka na kartě čtení, ve kterém chcete hodnotit výslovnost.

  3. Můžete použít zřízené textové ukázky nebo zadat vlastní skript.

    Při čtení textu byste měli být blízko mikrofonu, abyste měli jistotu, že nahraný hlas není příliš nízký.

    Snímek obrazovky, kde nahrát zvuk pomocí mikrofonu na kartě čtení

    V opačném případě můžete nahrát nahraný zvuk pro hodnocení výslovnosti. Po úspěšném nahrání se zvuk automaticky vyhodnotí systémem, jak je znázorněno na následujícím snímku obrazovky.

    Snímek obrazovky nahrávání zvuku ke zhodnocení.

Posouzení mluvení

Pokud chcete provést neoznačené hodnocení, vyberte kartu Mluvení. Tato funkce umožňuje provádět neoznačené hodnocení bez nutnosti předem poskytovat referenční text. Tady je postup, jak pokračovat:

  1. Na portálu Microsoft Foundry přejděte na hodnocení výslovnosti.

  2. Na kartě Mluvení zvolte podporovaný jazyk , který chcete vyhodnocovat výslovnost.

    Snímek obrazovky s výběrem podporovaného jazyka na kartě mluvení, pro hodnocení výslovnosti.

  3. Dále si můžete vybrat z ukázkových témat nebo zadat vlastní téma. Tato volba umožňuje vyhodnotit schopnost mluvit na daném předmětu bez předdefinovaného skriptu.

    Snímek obrazovky se zadáváním tématu na záložce Mluvení pro posouzení schopnosti mluvit na dané téma bez předem připraveného textu

    Při nahrávání řeči pro hodnocení výslovnosti je důležité zajistit, aby čas nahrávání spadá do doporučeného rozsahu 15 sekund (odpovídá více než 50 slovům) až 10 minut. Tento časový rozsah je optimální pro přesné vyhodnocení obsahu řeči. Pokud chcete získat skóre tématu, mluvený zvuk by měl obsahovat aspoň tři věty.

    Můžete také nahrát nahraný zvuk pro hodnocení výslovnosti. Po úspěšném nahrání se zvuk automaticky vyhodnotí systémem.

Provedení hodnocení her

Pokud chcete trénovat výuku jazyků prostřednictvím hry, postupujte takto:

  1. Na portálu Microsoft Foundry přejděte na hodnocení výslovnosti.

  2. Na kartě Hry zvolte podporovaný jazyk, u kterého chcete zkontrolovat výslovnost, a poté vygenerujte nový jazykolam, který chcete trénovat.

    Snímek obrazovky s výběrem podporovaného jazyka na herní kartě a vygenerováním nového jazykolamu, který chcete k vyhodnocení výslovnosti

  3. Nakonec můžete začít nahrávat a trénovat jazykolam, abyste získali skóre.

    Snímek obrazovky zobrazující výsledek hry v okně, který obsahuje hodnocení výslovnosti, slov a slabik.

Výsledky vyhodnocení výslovnosti

Po nahrání řeči nebo nahrání nahraného zvuku se výsledek posouzení zobrazí jako výstup . Výsledek zahrnuje váš nahraný zvuk a zpětnou vazbu k hodnocení vaší řeči. V případě potřeby si můžete poslechnout mluvený zvuk a stáhnout ho.

Můžete také zkontrolovat výsledek vyhodnocení výslovnosti ve formátu JSON. Skóre přesnosti na úrovni slova, slabiky a foonemu jsou součástí souboru JSON.

Snímek obrazovky znázorňující výsledek posouzení v okně zobrazení, který obsahuje přepis a zpětnou vazbu k vaší řeči

Slovo je zvýrazněno podle typu chyby. Typy chyb v hodnocení výslovnosti jsou reprezentovány různými barvami. Toto vizuální rozlišení usnadňuje identifikaci a analýzu konkrétních chyb. Poskytuje jasný přehled typů chyb a frekvencí v mluveném zvuku a pomáhá soustředit se na oblasti, které potřebují zlepšit. Jednotlivé typy chyb můžete zapnout nebo vypnout, abyste se mohli zaměřit na konkrétní typy chyb nebo vyloučit určité typy ze zobrazení. Tato funkce poskytuje flexibilitu při kontrole a analýze chyb v mluveném zvuku. Při najetí myší na každé slovo můžete zobrazit skóre přesnosti pro celé slovo nebo konkrétní fonely.

V dolní části výsledku posouzení se zobrazí výsledky vyhodnocování. Pro vyhodnocování výslovnosti skriptu je k dispozici pouze skóre výslovnosti (včetně skóre přesnosti, skóre fluency, skóre úplnosti a skóre prosody). U vyhodnocení výslovnosti bez popisků se zobrazí skóre výslovnosti (včetně skóre přesnosti, skóre fluency a skóre prosody) a skóre obsahu (včetně skóre slovníku, gramatického skóre a skóre tématu).

Členitost hodnocení výslovnosti

Posouzení výslovnosti poskytuje různé výsledky posouzení různých podrobností, od jednotlivých fonémů až po celý textový vstup.

  • Na úrovni fulltextu nabízí hodnocení výslovnosti další skóre: plynulost, úplnost a prozódie. Plynulost označuje, jak přesně řeč odpovídá použití tichých pauz mezi slovy rodilého mluvčího; úplnost ukazuje, kolik slov je správně vysloveno ve srovnání s referenčním textem; prozódie označuje, jak dobře mluvčí vyjadřuje prvky přirozenosti, výraznosti a celkové prozódie ve své řeči. Celkové skóre, které je agregováno z přesnosti, plynulosti, úplnosti a prosodie, následně určuje celkovou kvalitu výslovnosti poskytnuté řeči. Hodnocení výslovnosti také nabízí skóre obsahu (slovní zásoba, gramatika a téma) na úrovni úplného textu.
  • Na úrovni slova může posouzení výslovnosti automaticky rozpoznat chyby ve výslovnosti a současně poskytovat skóre přesnosti, což poskytuje podrobnější informace o vynechání, opakování, vkládání a nesprávné výslovnosti v dané řeči.
  • Skóre přesnosti na úrovni slabiky jsou aktuálně k dispozici prostřednictvím souboru JSON nebo sady Speech SDK.
  • Na úrovni fonémů poskytuje hodnocení výslovnosti skóre přesnosti každého fonému, což pomáhá studentům lépe porozumět podrobnostem výslovnosti jejich řeči.

Kromě standardních skóre přesnosti, plynulosti a úplnosti zahrnuje funkce hodnocení výslovnosti v Microsoft Foundry komplexní skóre, která poskytují podrobnou zpětnou vazbu k různým aspektům výkonu řeči a porozumění. Vylepšené skóre jsou následující: skóre prosody, skóre slovníku, skóre gramatiky a skóre tématu. Tato skóre nabízejí cenné přehledy o prosody řeči, použití slovníku, správnosti gramatiky a porozumění tématům.

Snímek obrazovky s celkovým skóre výslovnosti a celkovým skóre obsahu v Microsoft Foundry

V dolní části výsledku posouzení se zobrazí dvě celkové skóre: výslovnost a skóre obsahu. Na kartě Čtení najdete zobrazené skóre výslovnosti. Na kartě Mluvení se zobrazí skóre výslovnosti i skóre obsahu.

Skóre výslovnosti: Toto skóre představuje agregované hodnocení kvality výslovnosti a zahrnuje čtyři podspekty. Tato skóre jsou k dispozici na kartách pro čtení i mluvení jak pro skriptovaná, tak neskriptovaná hodnocení.

  • Skóre přesnosti: Vyhodnotí správnost výslovnosti.
  • Skóre plynulosti: Měří úroveň plynulosti a přirozeného chování řeči.
  • Skóre úplnosti: Odráží správný počet slov.
  • Skóre prosody: Vyhodnotí použití vhodné intonace, rytmu a stresu. Zavádí se několik dalších typů chyb souvisejících s posouzením prosody, například Neočekávaný konec, Chybějící konec a Monotone. Tyto typy chyb poskytují podrobnější informace o chybách ve výslovnosti ve srovnání s předchozím engine.

Skóre obsahu: Toto skóre poskytuje agregované hodnocení obsahu řeči a zahrnuje tři dílčí body. Toto skóre je k dispozici pouze na kartě mluvení pro neoznačené hodnocení.

  • Skóre slovníku: Vyhodnocuje efektivní použití slov a jejich vhodnost v daném kontextu k přesnému vyjádření myšlenek a úrovně lexikální složitosti.
  • Skóre gramatiky: Vyhodnotí správnost použití gramatiky a různé vzory vět. Bere v úvahu lexikální přesnost, gramatickou přesnost a rozmanitost struktur vět a poskytuje komplexnější hodnocení jazykové odbornosti.
  • Skóre tématu: Vyhodnocuje úroveň porozumění a zapojení s tématem probíraným ve řeči. Vyhodnotí schopnost mluvčího efektivně vyjádřit myšlenky a nápady související s daným tématem.

Tato celková skóre nabízejí komplexní hodnocení výslovnosti i obsahu, které poskytuje posluchačům cennou zpětnou vazbu o různých aspektech výkonu a porozumění řeči. Díky těmto vylepšeným funkcím můžou studenti jazyků získat hlubší přehled o svých výhodách a oblastech pro zlepšení výslovnosti i výrazu obsahu.

Poznámka:

Hodnocení obsahu a prozódie jsou k dispozici pouze v jazykové verzi en-US.

Vyhodnocování skóre v režimu streamu

Posouzení výslovnosti podporuje režim nepřerušeného streamování. Ukázka Microsoft Foundry umožňuje po dobu až 60 minut nahrávání v režimu streamování pro vyhodnocení. Pokud nestisknete tlačítko zastavit nahrávání, proces vyhodnocení se nedokončí a hodnocení můžete pohodlně pozastavit a pokračovat v hodnocení.

Hodnocení výslovnosti vyhodnocuje několik aspektů výslovnosti. V dolní části výsledku posouzení můžete vidět skóre výslovnosti jako agregované celkové skóre, které zahrnuje 4 dílčí aspekty: skóre přesnosti, skóre plynulosti, skóre úplnosti a skóre prozódie. V režimu streamování, protože se skóre přesnosti, plynulosti a prozódií může v čase během procesu nahrávání měnit, demonstrujeme v Microsoft Foundry přístup, který postupně zobrazuje přibližné celkové skóre před dokončením vyhodnocení, přičemž je váženo pouze na základě skóre přesnosti, plynulosti a prozódií. Skóre úplnosti se počítá pouze na konci vyhodnocení po stisknutí tlačítka stop, takže konečné hodnocení výslovnosti je agregováno z skóre přesnosti, skóre plynulosti, skóre úplnosti a skóre prozodie s váhou.

Celý proces vyhodnocení výslovnosti v režimu streamování najdete v níže uvedených ukázkových příkladech.

Zahájení nahrávání

Při zahájení nahrávání se skóre v dolní části začne měnit od 0.

Snímek obrazovky s celkovým skóre hodnocení při zahájení záznamu

Během nahrávání

Během nahrávání dlouhého odstavce můžete nahrávání kdykoli pozastavit. Nahrávání můžete dál vyhodnocovat, dokud nestisknete tlačítko Zastavit.

Snímek obrazovky s celkovým skóre hodnocení při nahrávání

Dokončení nahrávání

Po stisknutí tlačítka stop se v dolní části zobrazí skóre výslovnosti, skóre přesnosti, skóre plynulosti, skóre dokončení a skóre prozódie.

Snímek obrazovky s celkovými skóre hodnocení po nahrávání

Ceny

V základní sadě stojí použití hodnocení výslovnosti stejně jako převod řeči na text pro úroveň Standard nebo závazkové sazby ceny. Pokud si koupíte vrstvu závazku pro převod řeči na text, útrata za hodnocení výslovnosti se započítává do splnění závazku.

Funkce hodnocení výslovnosti také nabízí další hodnocení, která nejsou zahrnuta v ceně základní služby převodu řeči na text, například skóre prosody. Tato skóre jsou k dispozici jako příplatek nad rámec základní ceny za převod řeči na text. Pro informace o cenách viz ceny převodu řeči na text.

Tady je tabulka dostupných skóre hodnocení výslovnosti, ať už je dostupná ve skriptovaných nebo neskriptovaných hodnocení a jestli je zahrnutá do základní ceny přeměny řeči na text nebo doplatkové ceny.

Skóre Skriptované nebo neskriptované Je zahrnuto v základní ceně za převod řeči na text?
Přesnost Skriptované a neskriptované Ano
Plynulost Skriptované a neskriptované Ano
Úplnost Scénář Ano
Miscue Skriptované a neskriptované Ano
Prozódie Skriptované a neskriptované Ne

Zodpovědná AI

Systém AI zahrnuje nejen technologii, ale také lidi, kteří ho používají, osoby, které ho budou ovlivněny, a prostředí, ve kterém je nasazené. Přečtěte si poznámky k transparentnosti a seznamte se s zodpovědným používáním a nasazením umělé inteligence ve vašich systémech.

Další kroky