Dimension interface

Pojedynczy wymiar — jeden niezależny, mierzalny wymiar jakości w ramach planu oceny oceniającego rubrykę.

Właściwości

always_applicable

Gdy to prawda, sędzia LLM zawsze ocenia ten wymiar niezależnie od jego trafności (pomija ocenę przydatności). Ogólny wymiar jakości/polityki generowany przez usługę ma ten zestaw na true i nie da się go edytować. Użytkownicy mogą ustawić to na własnych wymiarach.

description

Co ten wymiar mierzy (np. "Poprawnie identyfikuje intencję rezerwacji użytkownika i realizuje odpowiedni przepływ pracy").

id

Stabilny identyfikator dla tego wymiaru (snake_case, np. correct_resolution). Required. Udostępniane przez użytkownika podczas ręcznego tworzenia oceniającego rubryki lub podczas przeglądu wygenerowanego zbioru przez człowieka w pętli; Potok generujący generuje wartość początkową, którą użytkownik może edytować. Edytowalne podczas zapisywania nowych wersji.

weight

Względna waga tego wymiaru (1-10). Potok generujący przypisuje dokładnie jedną wagę wymiarową 8-10; wszystkie pozostałe używają 1-6. Edycje użytkowników nie są ograniczone przez tę heurystykę.

Szczegóły właściwości

always_applicable

Gdy to prawda, sędzia LLM zawsze ocenia ten wymiar niezależnie od jego trafności (pomija ocenę przydatności). Ogólny wymiar jakości/polityki generowany przez usługę ma ten zestaw na true i nie da się go edytować. Użytkownicy mogą ustawić to na własnych wymiarach.

always_applicable?: boolean

Wartość właściwości

boolean

description

Co ten wymiar mierzy (np. "Poprawnie identyfikuje intencję rezerwacji użytkownika i realizuje odpowiedni przepływ pracy").

description: string

Wartość właściwości

string

id

Stabilny identyfikator dla tego wymiaru (snake_case, np. correct_resolution). Required. Udostępniane przez użytkownika podczas ręcznego tworzenia oceniającego rubryki lub podczas przeglądu wygenerowanego zbioru przez człowieka w pętli; Potok generujący generuje wartość początkową, którą użytkownik może edytować. Edytowalne podczas zapisywania nowych wersji.

id: string

Wartość właściwości

string

weight

Względna waga tego wymiaru (1-10). Potok generujący przypisuje dokładnie jedną wagę wymiarową 8-10; wszystkie pozostałe używają 1-6. Edycje użytkowników nie są ograniczone przez tę heurystykę.

weight: number

Wartość właściwości

number