Dimension interface

Uma única dimensão — uma dimensão de qualidade independente e mensurável dentro do plano de avaliação de um avaliador de rubricas.

Propriedades

always_applicable

Quando verdade, o juiz do LLM sempre pontua essa dimensão independentemente da relevância (pula a avaliação de aplicabilidade). A dimensão geral de qualidade/política gerada pelo serviço tem isso configurado como verdadeiro e não pode ser editado. Os usuários podem definir isso em suas próprias dimensões personalizadas. O serviço é padrão se false um valor não for especificado pelo chamador.

description

O que essa dimensão mede (por exemplo, 'Identifica corretamente a intenção de reserva do usuário e segue o fluxo de trabalho apropriado').

id

Identificador estável para esta dimensão (snake_case, por exemplo, correct_resolution). Required. Fornecido pelo usuário ao criar manualmente um avaliador de rubricas ou durante uma revisão humana no loop de um conjunto gerado; O pipeline de geração produz um valor inicial que o usuário pode editar. Pode ser editado ao salvar novas versões.

weight

Peso relativo dessa dimensão (1-10). O pipeline de geração atribui exatamente um peso dimensional 8-10; todos os outros usam de 1 a 6. As edições dos usuários não são limitadas por essa heurística.

Detalhes da propriedade

always_applicable

Quando verdade, o juiz do LLM sempre pontua essa dimensão independentemente da relevância (pula a avaliação de aplicabilidade). A dimensão geral de qualidade/política gerada pelo serviço tem isso configurado como verdadeiro e não pode ser editado. Os usuários podem definir isso em suas próprias dimensões personalizadas. O serviço é padrão se false um valor não for especificado pelo chamador.

always_applicable?: boolean

Valor da propriedade

boolean

description

O que essa dimensão mede (por exemplo, 'Identifica corretamente a intenção de reserva do usuário e segue o fluxo de trabalho apropriado').

description: string

Valor da propriedade

string

id

Identificador estável para esta dimensão (snake_case, por exemplo, correct_resolution). Required. Fornecido pelo usuário ao criar manualmente um avaliador de rubricas ou durante uma revisão humana no loop de um conjunto gerado; O pipeline de geração produz um valor inicial que o usuário pode editar. Pode ser editado ao salvar novas versões.

id: string

Valor da propriedade

string

weight

Peso relativo dessa dimensão (1-10). O pipeline de geração atribui exatamente um peso dimensional 8-10; todos os outros usam de 1 a 6. As edições dos usuários não são limitadas por essa heurística.

weight: number

Valor da propriedade

number