Auswerten von Sprachmodellen mit Azure Databricks

Fortgeschrittene Anfänger
Technische Fachkraft für Daten
Azure Databricks

Hier erfahren Sie, wie Sie die Auswertungen von großen Sprachmodellen (Large Language Models, LLMs) und herkömmlichen Machine Learning-Modellen (ML) vergleichen. Zudem wird ihre Beziehung zur KI-Systemauswertung erläutert, und verschiedene LLM-Auswertungsmetriken und spezifische aufgabenbezogene Auswertungen werden erklärt.

Lernziele

In diesem Modul lernen Sie Folgendes:

  • Vergleichen von LLM-Auswertungen und herkömmlichen ML-Auswertungen
  • Beschreiben der Beziehung zwischen der LLM-Auswertung und der Auswertung ganzer KI-Systeme
  • Beschreiben generischer LLM-Auswertungsmetriken (z. B. Genauigkeit, Perplexität und Toxizität)
  • Beschreiben Sie den Einsatz von "LLM als Richter" für die Bewertung.

Voraussetzungen

Bevor Sie mit diesem Modul beginnen, sollten Sie mit Azure Databricks vertraut sein. Erwägen Sie, "Explore Azure Databricks" abzuschließen, bevor Sie dieses Modul starten.