Dimension interface
Une dimension unique — une dimension de qualité indépendante et mesurable au sein du plan de notation d’un évaluateur de grilles d’évaluation.
Propriétés
| always_applicable | Lorsque c’est vrai, le juge du LLM note toujours cette dimension, quelle que soit sa pertinence (saute l’évaluation d’applicabilité). La dimension générale/politique générée par le service a cette règle sur vrai et n’est pas modifiable. Les utilisateurs peuvent définir cela sur leurs propres dimensions personnalisées. Le service se règle par |
| description | Ce que cette dimension mesure (par exemple, « Identifie correctement l’intention de réservation de l’utilisateur et suit le flux de travail approprié »). |
| id | Identifiant stable pour cette dimension (snake_case, par exemple, |
| weight | Poids relatif de cette dimension (1-10). Le pipeline de production attribue exactement un poids dimensionnel 8-10 ; tous les autres utilisent de 1 à 6. Les modifications des utilisateurs ne sont pas contraintes par cette heuristique. |
Détails de la propriété
always_applicable
Lorsque c’est vrai, le juge du LLM note toujours cette dimension, quelle que soit sa pertinence (saute l’évaluation d’applicabilité). La dimension générale/politique générée par le service a cette règle sur vrai et n’est pas modifiable. Les utilisateurs peuvent définir cela sur leurs propres dimensions personnalisées. Le service se règle par false défaut si une valeur n’est pas spécifiée par l’appelant.
always_applicable?: boolean
Valeur de propriété
boolean
description
Ce que cette dimension mesure (par exemple, « Identifie correctement l’intention de réservation de l’utilisateur et suit le flux de travail approprié »).
description: string
Valeur de propriété
string
id
Identifiant stable pour cette dimension (snake_case, par exemple, correct_resolution). Required. Fourni par l’utilisateur lors de la création manuelle d’un évaluateur de grilles d’évaluation ou lors d’une revue humaine dans la boucle d’un ensemble généré ; Le pipeline de génération produit une valeur initiale que l’utilisateur peut modifier. Modifiable lors de la sauvegarde de nouvelles versions.
id: string
Valeur de propriété
string
weight
Poids relatif de cette dimension (1-10). Le pipeline de production attribue exactement un poids dimensionnel 8-10 ; tous les autres utilisent de 1 à 6. Les modifications des utilisateurs ne sont pas contraintes par cette heuristique.
weight: number
Valeur de propriété
number