에이전트를 미리 보고 테스트하기

Microsoft Copilot Studio의 GitHub Copilot 하네스를 기반으로 한 에이전트의 미리보기 탭은 에이전트와 채팅하고, 동작을 디버깅하며, 대화 기록을 검토할 수 있는 인터랙티브 테스트 환경을 제공합니다—모두 게시 전에 이루어집니다.

메모

이 글의 기능은 사용량 기반 청구를 위해 Copilot 크레딧을 사용하는 GitHub Copilot 하네스를 기반으로 합니다. GitHub Copilot 하네스로 구동되는 에이전트 청구 개요에서 Copilot 크레딧에 대해 더 알아보세요.

사용량 기반 청구는 에이전트를 사용, 구축, 테스트, 평가하는 데 적용됩니다. 이러한 행동은 Copilot 크레딧을 소모할 수 있습니다.

프리뷰에서 할 수 있는 작업

프리뷰 탭은 포괄적인 테스트 및 디버깅 도구 모음을 제공합니다.

  • 대화형 채팅: 에이전트에게 메시지를 보내고 실시간으로 응답을 검토하세요. 채팅 경험은 게시된 후 사용자가 에이전트와 상호작용하는 모습을 재현합니다.
  • 프롬프트 제안: 프리뷰에서는 에이전트의 구성에 기반한 대화 시작 문구를 표시하여 일반적인 시나리오를 빠르게 테스트할 수 있습니다.
  • 활동 추적: 에이전트가 각 메시지를 처리하는 과정을 보여주는 상세한 사고 과정(CoT) 추적을 확인하세요. 여기에는 에이전트가 참조한 참조 자료 원본, 호출한 도구, 그리고 따랐던 추론 단계가 포함됩니다.
  • 대화 기록: 에이전트와의 과거 테스트 대화 내역을 검토할 수 있습니다.
  • 응답 피드백: 에이전트의 응답을 엄지 올림 또는 엄지 내림으로 평가하고, 품질 문제를 추적할 수 있도록 서면 피드백을 제공합니다.

프리뷰 레이아웃 옵션

프리뷰 탭에서는 작업 흐름에 맞는 다양한 뷰를 제공합니다.

  • 제작자 뷰: 채팅 내에 추론 카드가 포함된 기본 뷰로, 테스트 시 에이전트의 추론을 확인할 수 있습니다.
  • 최종 사용자 프리뷰: 최종 사용자 프리뷰를 활성화하면 최종 사용자가 디버깅 정보 없이 경험하는 에이전트를 확인할 수 있습니다.

프리뷰 헤더의 최종 사용자 프리뷰 토글을 사용해 뷰 간 전환이 가능합니다.

프리뷰 및 평가 사용 시기

시나리오 프리뷰 사용 평가 사용
개발 중 빠른 대화형 테스트
특정 응답이나 도구 호출 디버깅하기
지시사항이나 지식을 반복적으로 개선하기
다양한 테스트 케이스에서 품질 측정
배포 전 반복적이고 자동화된 테스트
에이전트 버전 간 결과 비교

두 접근법은 상호 보완적입니다. 프리뷰를 사용해 탐색하고 다듬은 후, 평가를 사용해 규모 검증을 하세요.

주요 기능

채팅 기능

프리뷰 탭에서 테스트할 때, 다음과 같은 작업을 수행할 수 있습니다.

  • 텍스트 메시지를 보내고 다중 턴 대화를 진행할 수 있습니다
  • 다양한 형식으로 표시된 에이전트 응답을 볼 수 있습니다
  • 검토 또는 문서화 목적으로 에이전트의 응답을 복사할 수 있습니다
  • 좋아요 또는 싫어요 응답 비율
  • 피드백 팝오버를 통해 상세한 피드백과 작성한 코멘트를 포함하여 제공할 수 있습니다
  • 초기화된 맥락에서 새 대화를 시작하여 테스트

활동 추적

활동 추적은 에이전트가 각 메시지를 어떻게 처리했는지 정확히 보여줍니다.

  • 사고 과정 단계: 에이전트가 따라간 추론 노드를 확인하세요
  • 참조 자료 원본 표시: 에이전트가 참고한 참조 자료 원본과 사용한 인용문 보기
  • 도구 실행: 도구, 커넥터, 흐름 또는 스킬이 언제 호출되었고 어떤 결과가 나왔는지 확인하세요
  • 오류 세부사항: 처리 중 발생한 오류를 식별하고 해결하세요

추적 내의 소스 또는 도구 알약을 선택하면 편집을 위해 빌드 탭의 해당 구성 요소로 바로 이동할 수 있습니다.

자세한 내용은 활동 추적을 사용하여 에이전트 디버깅하기에서 확인하세요.

대화 기록

프리뷰 탭은 테스트 대화 기록을 유지합니다. 다음을 할 수 있습니다:

  • 과거 대화와 그 결과를 검토하세요
  • 대화를 상태별로 필터링하세요(전체, 실패, 진행 중, 완료, 인증 필요 및 입력 필요)
  • 이전 대화록과 추론 단계를 확인하여 에이전트의 동작을 검증하세요
  • 각 세션의 상세 지표(단계/턴, 지속 시간, 마지막 단계, 요청을 처리한 모델 등)를 확인하세요

자세한 내용은 프리뷰 대화 관리를 참고하세요.