Automatisera AI-utvärderingar med Microsoft Foundry och GitHub Actions
Medel
Datavetare
AI-tekniker
DevOps-tekniker
Utvecklare
Azure
Foundry Tools
GitHub
Lär dig hur du implementerar automatiserade utvärderingar för AI-agentsvar med hjälp av Microsoft Foundry-utvärderare, skapar utvärderingsdatauppsättningar från produktionsdata och syntetisk generering, kör batchutvärderingar med Python-skript och integrerar utvärderingsarbetsflöden i GitHub Actions för kontinuerlig kvalitetssäkring.
Utbildningsmål
I slutet av den här modulen kan du:
- Förklara varför automatiserade utvärderingar kompletterar mänskliga utvärderingar i AI-kvalitetssäkring.
- Välj utvärderare som överensstämmer med kriterier för mänsklig utvärdering för validering.
- Skapa utvärderingsdatauppsättningar med lämplig sammansättning för omfattande testning.
- Implementera batchutvärderingar med hjälp av Python-skript i Microsoft Foundry.
- Integrera automatiserade utvärderingsarbetsflöden i GitHub Actions för kontinuerlig testning.
Förutsättningar
Innan du startar den här modulen bör du känna till grundläggande generativa AI-begrepp och -tjänster i Azure. Överväg att slutföra grunderna i Generative AI-modulen först. Grundläggande kunskaper om Python- och GitHub-arbetsflöden rekommenderas.
Kom igång med Azure
Välj det Azure-konto som passar dig. Betala per användning eller prova Azure kostnadsfritt i upp till 30 dagar. Registrera dig.