EvaluatorGenerationArtifacts interface
Des artefacts de provenance gérés par service produits par un travail de génération évaluateur. Présent uniquement sur les ressources EvaluatorVersion créées via le pipeline de génération. Le jeu de données combiné-JSONL Foundry est en lecture seule et se résout en un jeu de données versionné dans un espace de noms réservé aux services.
Propriétés
| dataset | Référence au seul ensemble de données Foundry (un fichier JSONL combiné, aligné sur la version de |
| kinds | Les types de lignes présentes dans |
Détails de la propriété
dataset
Référence au seul ensemble de données Foundry (un fichier JSONL combiné, aligné sur la version de EvaluatorVersion.version) contenant tous les artefacts produits par le pipeline de génération. Chaque ligne du JSONL porte un kind champ discriminant son contenu (par specexemple , tools, context).
dataset: DatasetReferenceValeur de propriété
kinds
Les types de lignes présentes dans dataset. Contient "spec" toujours (la spécification d’évaluation générée, un document Markdown décrivant ce que l’évaluateur mesure). Peut également contenir "tools" (lorsque la chaîne de génération a produit ou déduit des schémas d’outils OpenAI) et/ou "context" (lorsque des matériaux complémentaires tels que des téléchargements de fichiers ou des échantillons de traces ont été utilisés lors de la génération).
kinds: string[]Valeur de propriété
string[]