Обзор комплекта Copilot Studio

Copilot Studio Kit — это набор инструментов, созданный для улучшения вашего опыта работы с Copilot Studio. Команда Power Customer Advisory Team (Power CAT) создала и обслуживала набор для оснащения производителей инструментами для создания, управления, тестирования и оптимизации кастомных агентов. Будь то совершенствование подсказок, анализ производительности или настройка Web Chat, Copilot Studio Kit помогает создавать умных и высокоэффективных кастомных агентов.

скриншот главной страницы Copilot Studio Kit, показывающий инструменты для создания и оптимизации пользовательских агентов.

Возможности тестирования

Copilot Studio Kit позволяет создателям настраивать агенты, тесты и тестовые наборы, а также использовать их для пакетного тестирования своих кастомных агентов. Тестовые запуски дают подробные результаты, включая задержки, наблюдаемые ответы и агрегаты на уровне запуска. Типы тестов включают совпадение ответов, совпадение вложений, тематическое соответствие и генеративные ответы.

Замечание

Автоматизация тестов Copilot Studio Kit теперь поддерживает пользовательские рубрики для генеративных ответов. Узнайте больше в разделе «Используйте рубрики в тестах».

Узнать больше: Улучшить тестирование агентов

Хаб соответствия

Compliance Hub помогает организациям в масштабах определять и обеспечивать соблюдение политик управления для агентов Copilot Studio. Он непрерывно оценивает конфигурации агентов, собранные через Agent Inventory, по настраиваемым порогам риска, автоматически создавая случаи соответствия при обнаружении нарушений и отслеживая их через жизненный цикл проверки, управляемый SLA.

Администраторы могут настраивать пороговые значения, уровни риска, таймеры SLA и действия по обеспечению соблюдения (ручная проверка, карантин, удаление), а создатели могут устранять проблемы с помощью уведомлений Teams/Outlook, форм приема и дашбордов, показывающих открытые случаи и состояние соответствия. Compliance Hub позволяет создателям свободно внедрять инновации внутри Copilot Studio, обеспечивая при этом стабильный и аудитируемый уровень соответствия для всех агентов.

Узнайте больше: Определите и обеспечьте соблюдение соответствия агентам Copilot Studio Kit Compliance Hub

Уточнение рубрик (Новое!)

Уточнение рубрик — это мощная функция в Copilot Studio Kit, которая позволяет создавать, тестировать и итеративно улучшать повторно используемые стандарты оценки (рубрики) для ответов, сгенерированных ИИ. Эта функция помогает гарантировать, что оценка ответов вашего агента с помощью ИИ соответствует человеческому суждению и стандартам качества организации.

Узнать больше: Уточнение рубрик

Ключевые показатели общения

Ключевые показатели эффективности (KPI) в диалоге помогают создателям отслеживать и анализировать работу кастомных агентов. KPI разговоров дополняют встроенную аналитику Copilot Studio, предоставляя агрегированные данные в Dataverse. Эти данные облегчают понимание результатов разговоров.

Узнайте больше: Отслеживайте эффективность агентов с помощью ключевых показателей эффективности Conversation

Синхронизация SharePoint

Синхронизация SharePoint позволяет создателям периодически синхронизировать выбранный контент из точек SharePoint с пользовательскими базами знаний агентов в виде файлов.

Узнать больше: Улучшить реакции агентов с помощью SharePoint синхронизации

Prompt Advisor

Prompt Advisor помогает создателям создавать хорошо структурированные подсказки для улучшения пользовательского ввода. Создатели вводят задание, чтобы получить оценку уверенности, подробный анализ и рекомендуемые оптимизированные задания, которые можно дорабатывать итеративно.

Узнайте больше: Уточняйте подсказки с помощью Prompt Advisor

Webchat Playground

Webchat Playground помогает создателям настраивать внешний вид и поведение агента Web Chat, включая цвета, шрифты, миниатюры и многое другое.

Узнайте больше: Настраивайте Web Chat внешний вид с помощью Webchat Playground

Adaptive Cards Gallery предлагает создателям шаблоны адаптивных карт для различных сценариев. Шаблоны демонстрируют расширяемость визуализации и поведения адаптивных карт, а также включают примеры реализации на стороне агента и динамического привязки данных.

Узнайте больше: Повысить вовлечение пользователей с помощью Adaptive Cards Gallery

Инвентаризация агентов

Agent Inventory предоставляет администраторам общее представление о всех кастомных агентах в их организации. В ней показаны детали используемых функций, режима аутентификации, источников данных, типа оркестрации и многое другое. Agent Inventory включает дашборд, и вы можете экспортировать данные для использования в других приложениях.

Узнайте больше: Мониторинг агентов с помощью Agent Inventory

Инструмент проверки агентов

Agent Review Tool — это инструмент анализа решений, который проверяет ваших агентов на наличие возможных проблем или антипаттернов, которые могут негативно повлиять на производительность или безопасность. После анализа Agent Review Tool представляет результаты в удобном для интерпретации формате с подробностью и подробностями того, как решать каждую проблему.

Узнайте больше: Анализируйте агентов с помощью инструмента Agent Review Tool

Анализатор разговоров

Conversation Analyzer помогает создателям анализировать расшифровки разговоров своих кастомных агентов с помощью пользовательских подсказок для получения практических инсайтов.

Узнать больше: Проанализировать расшифровки разговоров

Стоимость агента

Компонент Agent Value — это модульный инструмент для классификации агентов Copilot Studio по типу, поведению и стоимости. Он помогает организациям понять роль каждого агента, согласовать их со стратегическими целями и измерить ценность, которую каждый агент приносит. Результаты отображаются визуально на панели управления Agent Value.

Узнать больше: Измерить стоимость агента

Автоматизированное тестирование с использованием конвейеров в Power Platform

Эта функция позволяет автоматизировать тестирование и развертывание кастомных агентов Copilot Studio с использованием Power Platform Pipelines. Цель — обеспечить автоматическую валидацию агентов через тестовые запуски перед их развертыванием в целевых средах (продакшн). Интегрируя потоки Power Automate с Dataverse и Copilot Studio Kit, этот подход вводит качественный гейт в процесс развертывания. Этот метод поддерживает непрерывные практики доставки и улучшает общее управление жизненным циклом развертывания.

Узнать больше: Автоматизировать тестирование и развертывание агентов с помощью конвейеров в Power Platform

Следующий шаг