Dimension interface

Una singola dimensione — una dimensione di qualità indipendente e misurabile all'interno del piano di valutazione di un valutatore di rubrica.

Proprietà

always_applicable

Quando è vero, il giudice LLM valuta sempre questa dimensione indipendentemente dalla rilevanza (salta la valutazione dell'applicabilità). La dimensione generale/politica generata dal servizio ha impostato questo valore come vero ed è non modificabile. Gli utenti possono impostarlo sulle proprie dimensioni personalizzate. Il servizio si attiva false di default se un valore non è specificato dal chiamante.

description

Cosa misura questa dimensione (ad esempio, 'Identifica correttamente l'intento di riserva dell'utente e segue il flusso di lavoro appropriato').

id

Identificatore stabile per questa dimensione (snake_case, ad esempio, correct_resolution). Required. Fornito dall'utente durante la creazione manuale di un valutatore di rubrica o durante la revisione umana nel ciclo di un insieme generato; La pipeline di generazione produce un valore iniziale che l'utente può modificare. Modificabile quando si salva nuove versioni.

weight

Peso relativo di questa dimensione (1-10). La pipeline di generazione assegna esattamente un peso dimensionale 8-10; Tutti gli altri usano da 1 a 6. Le modifiche degli utenti non sono vincolate da questa euristica.

Dettagli proprietà

always_applicable

Quando è vero, il giudice LLM valuta sempre questa dimensione indipendentemente dalla rilevanza (salta la valutazione dell'applicabilità). La dimensione generale/politica generata dal servizio ha impostato questo valore come vero ed è non modificabile. Gli utenti possono impostarlo sulle proprie dimensioni personalizzate. Il servizio si attiva false di default se un valore non è specificato dal chiamante.

always_applicable?: boolean

Valore della proprietà

boolean

description

Cosa misura questa dimensione (ad esempio, 'Identifica correttamente l'intento di riserva dell'utente e segue il flusso di lavoro appropriato').

description: string

Valore della proprietà

string

id

Identificatore stabile per questa dimensione (snake_case, ad esempio, correct_resolution). Required. Fornito dall'utente durante la creazione manuale di un valutatore di rubrica o durante la revisione umana nel ciclo di un insieme generato; La pipeline di generazione produce un valore iniziale che l'utente può modificare. Modificabile quando si salva nuove versioni.

id: string

Valore della proprietà

string

weight

Peso relativo di questa dimensione (1-10). La pipeline di generazione assegna esattamente un peso dimensionale 8-10; Tutti gli altri usano da 1 a 6. Le modifiche degli utenti non sono vincolate da questa euristica.

weight: number

Valore della proprietà

number