Jak služba Personalizace funguje
Důležité
Od 20. září 2023 nebudete moct vytvářet nové prostředky personalizace. Služba Personalizace se vyřadí z provozu 1. října 2026.
Prostředek Personalizace, vaše studijní smyčka, používá strojové učení k vytvoření modelu, který predikuje hlavní akci pro váš obsah. Model se trénuje výhradně na základě vašich dat, která jste do něj odeslali pomocí volání Rank a Rewards . Každá smyčka je zcela nezávislá na sobě.
Rozhraní API pro hodnocení a odměny ovlivňují model.
Akce s funkcemi a kontextovými funkcemi odesíláte do rozhraní Rank API. Rozhraní Rank API se rozhodne použít jednu z těchto akcí:
- Zneužití: Aktuální model, který rozhoduje o nejlepší akci na základě minulých dat.
- Prozkoumat: Místo hlavní akce vyberte jinou akci. Toto procento pro prostředek Personalizace nakonfigurujete na webu Azure Portal.
Určíte skóre odměny a toto skóre odešlete do rozhraní API odměny. Rozhraní API odměny :
- Shromažďuje data pro trénování modelu tím, že zaznamenává funkce a skóre odměn jednotlivých volání pořadí.
- Tato data slouží k aktualizaci modelu na základě konfigurace zadané v zásadách výuky.
Váš systém volal Personalizace
Následující obrázek znázorňuje tok architektury volání pořadí a odměn:
Akce s funkcemi a kontextovými funkcemi odesíláte do rozhraní Rank API.
- Personalizace se rozhodne, jestli má aktuální model zneužít, nebo prozkoumat nové volby modelu.
- Výsledek řazení se odešle do EventHubu.
Nejvyšší pořadí se vrátí do systému jako ID akce odměny. Váš systém tento obsah prezentuje a určuje skóre odměny na základě vlastních obchodních pravidel.
Váš systém vrátí skóre odměny do smyčky učení.
- Když personalizace obdrží odměnu, odměna se odešle na EventHub.
- Pořadí a odměna jsou korelovány.
- Model AI se aktualizuje na základě výsledků korelace.
- Modul pro odvozování se aktualizuje novým modelem.
Přizpůsobení modelu přetrénuje
Personalizace model přetrénuje na základě nastavení aktualizace četnosti modelů na prostředku Personalizace na webu Azure Portal.
Personalizace používá všechna aktuálně zachovaná data na základě nastavení uchovávání dat v počtu dnů na vašem prostředku Personalizace na webu Azure Portal.
Zdroje informací o personalizaci
Personalizace je založená na špičkové vědě a výzkumu v oblasti učení o posílení, včetně dokumentů, výzkumných aktivit a probíhajících oblastí průzkumu v Microsoft Research.
Další kroky
Informace o hlavních scénářích pro personalizaci