Testování modelu

Po úspěšném natrénování modelu můžete pomocí překladů vyhodnotit kvalitu modelu. Abyste se mohli informovaně rozhodnout, jestli použít náš standardní nebo vlastní model, měli byste vyhodnotit rozdíl mezi skóre BLEU vašeho vlastního modelu a naším standardním modelem BLEU. Pokud jste modely natrénovali v úzké doméně a trénovací data jsou konzistentní s testovacími daty, můžete očekávat vysoké skóre BLEU.

Skóre BLEU

BLEU (dvojjazyčná podstudie hodnocení) je algoritmus pro vyhodnocení přesnosti nebo přesnosti textu, který byl strojově přeložen z jednoho jazyka do druhého. Custom Translator používá metriku BLEU jako jeden ze způsobů, jak vyjádřit přesnost překladu.

Skóre BLEU je číslo mezi nulou a 100. Skóre nula značí nekvalitní překlad, kdy nic v překladu neodpovídá odkazu. Skóre 100 označuje dokonalý překlad, který je shodný s odkazem. Není nutné dosáhnout skóre 100 – skóre BLEU mezi 40 a 60 značí vysoce kvalitní překlad.

Další informace

Podrobnosti o modelu

  1. Vyberte okno Podrobnosti o modelu .

  2. Vyberte název modelu. Zkontrolujte datum a čas trénování, celkovou dobu trénování, počet vět použitých pro trénování, ladění, testování a slovník. Zkontrolujte, jestli systém vygeneroval testovací a ladící sady. Použijete ho Category ID k vytváření žádostí o překlad.

  3. Vyhodnoťte skóre BLEU modelu. Zkontrolujte testovací sadu: skóre BLEU je skóre vlastního modelu a BLEU směrného plánu je předem natrénovaný základní model, který se používá k přizpůsobení. Vyšší skóre BLEU znamená vysokou kvalitu překladu pomocí vlastního modelu.

    Snímek obrazovky znázorňující podrobnosti modelu

Testování kvality překladu modelu

  1. Vyberte Okno Test modelu .

  2. Vyberte Název modelu.

  3. Překlad z vašeho vlastního modelu a modelu standardního plánu (náš předtrénovaný směrný plán používaný k přizpůsobení) vyhodnotí člověk proti referenci (překlad cíle z testovací sady).

  4. Pokud jste s výsledky trénování spokojeni, vytvořte žádost o nasazení pro natrénovaný model.

Další kroky