Dimension interface

Une dimension unique — une dimension de qualité indépendante et mesurable au sein du plan de notation d’un évaluateur de grilles d’évaluation.

Propriétés

always_applicable

Lorsque c’est vrai, le juge du LLM note toujours cette dimension, quelle que soit sa pertinence (saute l’évaluation d’applicabilité). La dimension générale/politique générée par le service a cette règle sur vrai et n’est pas modifiable. Les utilisateurs peuvent définir cela sur leurs propres dimensions personnalisées. Le service se règle par false défaut si une valeur n’est pas spécifiée par l’appelant.

description

Ce que cette dimension mesure (par exemple, « Identifie correctement l’intention de réservation de l’utilisateur et suit le flux de travail approprié »).

id

Identifiant stable pour cette dimension (snake_case, par exemple, correct_resolution). Required. Fourni par l’utilisateur lors de la création manuelle d’un évaluateur de grilles d’évaluation ou lors d’une revue humaine dans la boucle d’un ensemble généré ; Le pipeline de génération produit une valeur initiale que l’utilisateur peut modifier. Modifiable lors de la sauvegarde de nouvelles versions.

weight

Poids relatif de cette dimension (1-10). Le pipeline de production attribue exactement un poids dimensionnel 8-10 ; tous les autres utilisent de 1 à 6. Les modifications des utilisateurs ne sont pas contraintes par cette heuristique.

Détails de la propriété

always_applicable

Lorsque c’est vrai, le juge du LLM note toujours cette dimension, quelle que soit sa pertinence (saute l’évaluation d’applicabilité). La dimension générale/politique générée par le service a cette règle sur vrai et n’est pas modifiable. Les utilisateurs peuvent définir cela sur leurs propres dimensions personnalisées. Le service se règle par false défaut si une valeur n’est pas spécifiée par l’appelant.

always_applicable?: boolean

Valeur de propriété

boolean

description

Ce que cette dimension mesure (par exemple, « Identifie correctement l’intention de réservation de l’utilisateur et suit le flux de travail approprié »).

description: string

Valeur de propriété

string

id

Identifiant stable pour cette dimension (snake_case, par exemple, correct_resolution). Required. Fourni par l’utilisateur lors de la création manuelle d’un évaluateur de grilles d’évaluation ou lors d’une revue humaine dans la boucle d’un ensemble généré ; Le pipeline de génération produit une valeur initiale que l’utilisateur peut modifier. Modifiable lors de la sauvegarde de nouvelles versions.

id: string

Valeur de propriété

string

weight

Poids relatif de cette dimension (1-10). Le pipeline de production attribue exactement un poids dimensionnel 8-10 ; tous les autres utilisent de 1 à 6. Les modifications des utilisateurs ne sont pas contraintes par cette heuristique.

weight: number

Valeur de propriété

number