Тестирование агента

Важно!

Некоторые сведения относятся к предварительно выпущенному продукту, который может быть существенно изменен перед выпуском. Корпорация Майкрософт не дает никаких гарантий, явных или подразумеваемых, относительно предоставленных здесь сведений.

В этой статье описывается, как протестировать созданный агент или его средства в Security Copilot.

Чтобы протестировать агент, необходимо опубликовать агент для пользователя или рабочей области область. Этап тестирования — это цикл итерации и улучшения: настройте агент, вызовите его с помощью примеров входных данных или используйте оптимизацию инструкций автонастройки, наблюдайте за его поведением или выходными данными и уточняйте манифест YAML по мере необходимости на основе наблюдаемых результатов.

Предварительные условия

Подключаемый модуль — это коллекция связанных средств, которые пользователи могут включить в Security Copilot, которые расширяют возможности агента, предоставляя ему доступ к ресурсам за пределами агента и LLM.

• Убедитесь, что включены обязательные подключаемые модули . Их можно включить в разделе Тест на вкладке > Обязательные подключаемые модули.

• Выберите Включить подключаемый модуль , если подключаемый модуль не включен. Например, для подключаемого модуля Microsoft Threat Intelligence выберите Включить подключаемый модуль для Microsoft Threat Intelligence.

  

Действия по тестированию агента

Ниже приведены действия по тестированию агента.

1. Опубликуйте агент для пользователя или рабочей области область.

2. В верхней области навигации перейдите на вкладку Тест .

   

3. На странице Тестирование средств агента :

   • Выберите агент или средство в раскрывающемся списке.

   • Укажите входные данные для агента или средства, если это настроено.

4. В разделе Оптимизация инструкций :

   • Если параметр включен (необязательно), оптимизация инструкций автонастройки рекомендует оптимизированные инструкции агента на основе ожидаемых выходных данных. Он автоматизирует итеративный процесс обновления, тестирования и уточнения инструкций агента с помощью цикла оценки. Autotune проверяет инструкции и оптимизации агента для повышения оценки качества ИИ, чтобы агент работал должным образом.

   • В зависимости от выбранного типа средства можно предоставить инструкции по ожидаемому выводузапроса и естественного языка (NL) для тестирования. Предоставьте подробные выходные данные агента в том виде, в который он будет работать.

     

5. Выберите Выполнить тест , чтобы создать результаты теста.

   • Выходные данные агента являются результатом теста.

   • Если включена оптимизация инструкций автонастройки, она предоставляет оценки и рекомендуемые инструкции на основе ожидаемых выходных данных.

6. После запуска оптимизации инструкций автонастройки, если она включена:

   • Предоставляется аналитика оптимизации инструкций автонастройки, которая включает в себя оценки качества.

   • Результаты включают рекомендуемые инструкции и оценки различия между текущими инструкциями и рекомендуемые инструкции по оптимизации инструкций автонастройки, а также рассуждения.

   • Вы можете скопировать и вставить инструкции по оптимизации автозаписи, предоставленные в их агенте.

   • Прокрутите вниз на панели Тест, чтобы просмотреть оптимизированные результаты автонастройки. Вставьте его в инструкции в форме настройки средства, перейдя на вкладку Сборка.

     

7. Выберите Карта действий , если вы хотите просмотреть рабочий процесс выполнения агента. Выберите конкретный узел, чтобы просмотреть сведения.

8. Когда вы будете удовлетворены ответом и функциональностью агента после тестирования, опубликуйте агент в рабочей области область. Агент публикуется в активные агенты.

   Примечание.

   Автонастройка в настоящее время доступна в двух регионах — США и ЕС. В ближайшее время она будет расширена на другие регионы.

Агент управления версиями

1. При публикации агента с тем же именем он переопределяет предыдущий агент.

2. При публикации агента с новым именем он создает новый агент.

Удаление агента

1. Вы можете перейти в раздел Источники в строке > командной строки Управление источниками в Security Copilot и удалить агент.

2. Сторонние партнеры. Для удаления необходимо перейти в хранилище безопасности.

Агент редактирования

Вы можете изменить пользовательский агент, выбрав один из вариантов:

1. Перейдите в меню Сборка.

2. В разделе Мои агенты просмотрите агенты, созданные и опубликованные на область пользователя (Только вы) или область рабочей области.

3. Чтобы отличить агенты, опубликованные в пользовательской область, от агентов, опубликованных для всех пользователей в рабочей области, переключите параметр Видимый только для меня.

4. Выберите или найдите агент для редактирования.

   

5. Сведения об агенте заполняются на странице обзора агента.

6. Выберите Опубликовать после внесения изменений в агент.

   Примечание.

   Вы также можете перейти на верхнюю панель навигации и выбрать раскрывающийся список, чтобы изменить агент.