에이전트 테스트

중요

이 게시물의 일부 정보는 상용으로 출시되기 전에 실질적으로 수정될 수 있는 사전 릴리스된 제품과 관련이 있습니다. Microsoft는 여기에서 제공하는 정보와 관련하여 명시적이거나 묵시적인 어떠한 보증도 제공하지 않습니다.

이 문서에서는 Security Copilot 만든 에이전트 또는 해당 도구를 테스트하는 방법을 안내합니다.

에이전트를 테스트하려면 사용자 또는 작업 영역 scope 에이전트를 게시해야 합니다. 테스트 단계는 반복 및 개선 루프입니다. 에이전트를 구성하거나, 샘플 입력을 사용하여 호출하거나, autotune 명령 최적화를 사용하고, 동작 또는 출력을 관찰하고, 관찰된 결과에 따라 필요에 따라 YAML 매니페스트를 구체화합니다.

필수 구성 요소

플러그 인은 에이전트 및 LLM 외부의 리소스에 대한 액세스 권한을 부여하여 에이전트가 수행할 수 있는 작업을 확장하는 Security Copilot 사용자가 사용하도록 설정할 수 있는 관련 도구 모음입니다.

필수 플러그 인이 사용하도록 설정되어 있는지 확인합니다. 테스트 탭 > 필수 플러그 인 섹션에서 사용하도록 설정할 수 있습니다.
플러그 인이 사용하도록 설정되지 않은 경우 플러그 인 사용을 선택합니다. 예를 들어 Microsoft Threat Intelligence 플러그 인의 경우 에 플러그 인Microsoft Threat Intelligence사용을 선택합니다.

에이전트를 테스트하는 단계

에이전트를 테스트하는 단계는 다음과 같습니다.

사용자 또는 작업 영역 scope 에이전트를 게시합니다.
위쪽 탐색 창에서 테스트 탭으로 이동합니다.
에이전트의 도구 테스트 페이지에서 다음을 수행합니다.
- 드롭다운에서 에이전트 또는 도구를 선택합니다.
- 구성된 경우 에이전트 또는 도구에 입력을 제공합니다.
명령 최적화 섹션에서 다음을 수행합니다.
- 사용하도록 설정된 경우(선택 사항) autotune 명령 최적화는 예상 출력에 따라 최적화된 에이전트 지침을 권장합니다. 평가 루프를 통해 에이전트 지침을 업데이트, 테스트 및 구체화하는 반복 프로세스를 자동화합니다. Autotune은 에이전트 지침 및 최적화를 검토하여 에이전트가 예상대로 수행되도록 AI 품질 점수를 높입니다.
- 선택한 도구 유형에 따라 프롬프트 및 NL(자연어) 테스트를 위한 예상 출력 지침을 제공할 수 있습니다. 에이전트가 동작할 것으로 예상하는 대로 에이전트의 자세한 출력을 제공합니다.
테스트 실행을 선택하여 테스트 결과를 생성합니다.
- 에이전트의 출력은 테스트의 결과입니다.
- autotune 명령 최적화를 사용하도록 설정하면 예상 출력에 따라 점수 및 권장 지침을 제공합니다.
Autotune 명령 최적화가 실행된 후 사용하도록 설정된 경우:
- 품질 점수를 포함하는 Autotune 명령 최적화 분석이 제공됩니다.
- 결과에는 권장 지침 및 현재 지침과 Autotune 명령 최적화 권장 지침과 추론 간의 점수 구분이 포함됩니다.
- Autotune 명령 최적화 제공 지침을 에이전트에 복사하여 붙여넣을 수 있습니다.
- 테스트 패널에서 아래로 스크롤하여 Autotune 최적화 결과를 확인합니다. 빌드 탭으로 이동하여 도구 구성 양식의 지침에 붙여넣습니다.
에이전트 실행 워크플로를 보려면 활동 맵 을 선택합니다. 세부 정보를 보려면 특정 노드를 선택합니다.
테스트 후 에이전트의 응답 및 기능에 만족하면 작업 영역 scope 에이전트를 게시합니다. 에이전트가 활성 에이전트에 게시됩니다.

참고

Autotune은 현재 미국과 EU의 두 지역에서 사용할 수 있습니다. 곧 다른 지역으로 확장될 예정입니다.