Обзор агента Microsoft 365 Insights

Агент Microsoft 365 Insights объединяет аналитику использования и отзывы пользователей для агентов в клиенте в одном интерфейсе Copilot. Задавайте вопросы на естественном языке о ежедневных, еженедельных и ежемесячных активных пользователях, скользящем удержании, закрепленности, тенденциях внедрения, сравнениях агентов, оценках и дословных отзывах, представленных пользователями.

Используйте агрегированные сигналы использования, чтобы понять, что происходит, а затем просмотрите оценки и комментарии, чтобы решить, что следует улучшить. Использование доступно для агентов, которые можно увидеть в клиенте. Для отправки отзывов требуется подтвержденное владение и отправка отзывов с участием администратора клиента для выбранного агента.

Преимущества использования агента Insights

Владельцы агентов, ИТ-администраторы и заинтересованные лица в бизнесе должны знать, как работают их агенты. Сегодня эти сведения находятся на панелях мониторинга, в отчетах Power BI, на портале разработчиков Teams и в специальных запросах Kusto, которые большинство из этих аудиторий не могут выполнить самостоятельно. В результате:

  • После отправки потребуется много времени, чтобы узнать, использует ли кто-нибудь агент.
  • Синхронизация между этими источниками может быть несогласованной.
  • Понимание использования зависит от небольшой группы аналитиков.
  • В командах основные термины, такие как удержание и прилипчивость , определяются непоследовательно.
  • У владельцев агентов может не быть согласованного способа просмотра отзывов, отправляемых пользователями для их агентов.

Агент Insights предоставляет вам согласованный, задокументированный набор метрик активности и ответы на простом языке на той же поверхности Copilot Chat, где живут ваши агенты. Совокупные сигналы использования показывают, растет ли внедрение, сохраняется или снижается. Оценки и дословные отзывы, предоставленные пользователями, добавляют непосредственный контекст того, что пользователи ценят и на что требуют внимания.

У этих двух типов данных разные правила доступа. Видимости агента достаточно для агрегированной аналитики использования. Отзыв возвращается только в том случае, если агент принадлежит автору запроса, а администратор клиента разрешил для него отправку отзывов. Возвращенный отзыв не включает идентификатор отправителя и связанное с ним содержимое беседы.

Для кого предназначена эта услуга

Агент Insights предназначен для трех аудиторий:

  1. Владельцы агентов и менеджеры по продуктам. Необходимо знать, растет ли использование, где оно стабилизируется и как оно соотносится с одноранговыми агентами в клиенте. Для своих агентов вы можете связать эти сигналы с оценками и комментариями, чтобы определить проблемы продукта и определить приоритетные улучшения.
  2. ИТ-администраторы и лидеры Copilot. Вам нужны тенденции внедрения и обоснованный способ обсудить их со спонсорами из бизнеса. Администраторы клиентов также контролируют, можно ли делиться отзывами с владельцами, с помощью параметра отправки отзывов агента в Центре администрирования Microsoft 365. Этот элемент управления сам по себе не предоставляет администраторам доступ к отзывам агента.
  3. заинтересованным сторонам и руководителям бизнеса. Вы вложили средства в агента и хотите периодически читать на понятном языке о том, окупаются ли они, не изучая инструмент бизнес-аналитики.

Агент не предназначен для анализа отдельных пользователей или когортной атрибуции. Дополнительные сведения см. в разделе Границы области.

Возможности агента Insights

С помощью агента Insights вы можете:

  • Получайте ежедневных, еженедельных и ежемесячных активных пользователей для любого агента, который вы видите в своем клиенте.
  • Сравнение показателей по двум агентам одновременно.
  • Просмотр количества уникальных пользователей за скользящие периоды (последние 7 дней, последние 30 дней или настраиваемая дата привязки).
  • Получите агрегированный скользящий прокси-сервер хранения (1, 7, 30, 60 или 90 дней) без раскрытия отдельной идентификации.
  • Получите концентрацию использования (липкость) (DAU, деленную на MAU) для любого агента.
  • Определите самого быстрорастущего агента в клиенте по еженедельному изменению количества уникальных пользователей.
  • Получите пошаговое представление об основном характере использования агентом (интенсивное использование в будние дни, концентрированное рабочее время, стабильное или колючее) из заключительного 30-дневного распределения.
  • Укажите агентов, которыми вы владеете, чтобы можно было выбрать конкретного агента для запроса отзыва.
  • Просмотрите оценки и дословные комментарии, отправленные пользователями, для агента, которым вы владеете, если администратор клиента разрешает обмен отзывами для этого агента.
  • Ознакомьтесь с количеством возвращенных отзывов, временным интервалом выборки и доступными дополнительными отзывами.
  • Попросите краткое изложение повторяющихся тем о продуктах в возвращенном отзыве, не делая при этом выводы о пользовательской идентичности, эмоциях, отношении или производительности труда.

Доступ и видимость данных

Доступ зависит от типа запрашиваемой информации.

  • Аналитика использования. Пользователь с лицензией Microsoft 365 Copilot может спросить о любом агенте, который он может видеть и использовать в своем клиенте. Владение не требуется. Результаты являются агрегированными и не идентифицируют отдельных пользователей.
  • Отзывы и оценки. Инициатор запроса должен быть проверенным владельцем выбранного агента, а администратор клиента должен включить обмен отзывами для всех агентов или включить этого агента в список "Выбранные агенты". Видимость использования сама по себе не предоставляет доступ к отзывам.
  • Администрирование клиента. Параметр отправки отзывов агента определяет, можно ли делиться отзывами с владельцами. Она не влияет на то, могут ли пользователи отправлять оценки или комментарии, и не предоставляет администраторам доступ к отзывам агента, если они также не удовлетворят проверку права собственности.
  • Рабочий IQ. Программный доступ следует тем же правилам: видимость агента для совокупного использования; предоставление общего доступа с правами администратора и подтверждение владельца для отправки отзывов.

Доступные метрики

В настоящее время агент поддерживает следующие метрики. Он вычисляет каждую метрику детерминированно на основе агрегированных данных о действиях. Он не генерирует числа и не оценивает их по модели.

Показатель Что он отвечает Способ вычисления
Ежедневные активные пользователи (DAU) Сколько отдельных пользователей использовали агент сегодня или в указанный день Количество отдельных пользователей, имеющих хотя бы один сеанс в течение дня
Еженедельные активные пользователи (WAU) Сколько отдельных пользователей использовали агент в течение 7-дневного окна Количество отдельных пользователей с хотя бы одним сеансом в 7-дневном окне
Количество активных пользователей за месяц Сколько отдельных пользователей использовали агент в течение 30-дневного окна Количество отдельных пользователей с хотя бы одним сеансом в 30-дневном окне
Количество уникальных пользователей с течением времени Как количество уникальных пользователей меняется в Windows Ряд подсчетов отдельных пользователей в последовательных окнах
Попарное сравнение Параллельные DAU, WAU и MAU для двух агентов Две параллельные метрики, построенные вместе
Скользящий прокси-сервер для хранения N-day Устойчивый, растущий или сокращающийся пул активных пользователей unique_users[t − N → t] / unique_users[t − 2N → t − N], где N равно 1, 7, 30, 60 или 90
Липкость Насколько концентрированным является использование среди пользователей за месяц DAU, деленная на MAU, выраженная в процентах
Тенденция внедрения Направление количества уникальных пользователей: неделя за неделей или месяц Знак и величина самой последней дельты за неделю или месяц за неделю
Самые быстрорастущие Какой агент вырос больше всего на этой неделе Еженедельная процентная разница уникальных пользователей среди агентов в областях
Основной шаблон использования Временная форма использования Категориальный нарратив из распределения DAU за последние 30 дней

Важно

Скользящий прокси-сервер удержания — это агрегированное отношение количества окон к окнам, а не удержание когорты на уровне пользователя. Агент всегда включает это предостережение в свой ответ. Для хранения когорты требуется удостоверение на уровне пользователя, которое агент Insights не собирает по умолчанию.

Доступные отзывы и оценки

Агент Insights возвращает обратную связь, только если обе проверки доступа пройдены: администратор клиента разрешает обмен отзывами для выбранного агента, а инициатор запроса является проверенным владельцем этого агента. Возможность просматривать или использовать агент или получать его совокупное использование не устанавливает права собственности и не предоставляет доступ к отзывам.

Данные отзывов Что он отвечает Что это возвращает
Оценки Какие оценки отправляли пользователи Значения "нравится" или "не нравится" в примере отзыва
Дословные отзывы, предоставленные пользователями Что пользователи сказали об агенте дословные комментарии, которые могут воспроизводиться по явному запросу;
Количество возвращенных отзывов Количество элементов отзыва в отчет Количество элементов отзывов на возвращенной странице
Интервальный интервал Когда был отправлен возвращенный отзыв Метки времени начала и окончания для возвращенного образца отзыва (если доступны)

Важно

Результаты отзыва не включают идентификатор отправителя. Агент Insights также не раскрывает контекст ИИ, отдельные запросы или ответы, расшифровки или содержимое бесед.

При обобщении отзывов агент сообщает о наблюдаемых темах продуктов и явных оценках. Он не подразумевает производительность труда, защищенные или чувствительные личные характеристики, внутренние или эмоциональные состояния или отношение к рабочему месту.

Как работают запросы на использование и отзывы

При использовании аналитики типичное взаимодействие происходит по следующей схеме:

  1. Вы задаете вопрос агенту Insights в Microsoft 365 Copilot Chat. Например, "Каков еженедельный тренд активных пользователей для {Agent Name}?"
  2. Агент сопоставляет ваше намерение с поддерживаемыми метриками.
  3. Если запрос поддерживается, агент извлекает соответствующие агрегированные метрики для агента и окна, о которых вы спрашивали, а затем возвращает обоснованный ответ с базовыми числами.
  4. Если запрос не поддерживается (например, удержание отдельных пользователей), агент возвращает детерминированный ответ, указывающий на ближайший поддерживаемый сигнал.

Список поддерживаемых запросов и их формулировку см. в разделе Примеры запросов.

Как работает обратная связь

Запросы на отзыв сопровождаются отдельным взаимодействием:

  1. Администратор клиента разрешает обмен отзывами об агентах для всех агентов или включает выбранного агента.
  2. Вы спрашиваете у агента Insights, какими агентами вы владеете, или запрашиваете отзыв об агенте, которым вы владеете.
  3. Агент разрешает выбранный агент и проверяет, является ли инициатор запроса владельцем, прежде чем получить отзыв.
  4. Если право собственности подтверждено и для выбранного агента включена возможность отправки отзывов, агент возвращает доступные оценки и дословные комментарии с количеством возвращенных отзывов, окном образцов и наличием дополнительных отзывов.
  5. Если принадлежность не может быть проверена, агент не возвращает отзыв и объясняет статус собственности.

Администратор управляет отправкой отзывов

Администратор клиента управляет обменом отзывами в Центре администрирования Microsoft 365 в разделе параметров агентов>>Обмен отзывами с агентом. Выбор всех агентов или выбранных агентов делает отзывы доступными для отправки проверенным владельцам соответствующих агентов. Этот параметр не влияет на то, могут ли пользователи отправлять оценки или комментарии, и он не предоставляет администраторам доступ к отзывам агента, если они не пройдут проверку права собственности. Полное руководство по настройке см. в разделе "Обмен отзывами об агентах".

Два способа получить данные об использовании и отзывы

Вы можете получить данные об использовании и отзывах об агентах в своем клиенте, обратившись к агенту Insights непосредственно в Microsoft 365 Copilot Chat или получив доступ к тем же возможностям программным образом через Work IQ.

В продукте (агент Insights) Программатик (рабочий IQ)
Описание Задайте агенту Insights вопросы на естественном языке в Copilot Chat Извлечение метрик использования и отзывов из командной строки и конечных точек Work IQ
Лучше всего подходит для Владельцы агентов, ИТ-администраторы и спонсоры, которым требуется быстрое чтение на простом языке Разработчики, автоматизирующие преобразование данных в панели мониторинга, системы показателей или конвейерные проверки
Стоимость Включено в вашу лицензию Copilot; без дополнительной платы Измеряется с помощью кредитов Copilot

Оба способа поддерживают аналитику использования и обратную связь. Метрики использования остаются агрегированными, а доступ к отзывам регулируется теми же требованиями к общему доступу для администраторов и владельцам. Разница заключается в поверхности и в том, как вы потребляете данные.

Взаимодействие в продукте (без дополнительной платы)

Использование агента Insights внутри Microsoft 365 Copilot Chat входит в вашу лицензию Copilot. Дополнительная плата за вопросы об использовании продукта не взимается. Для большинства владельцев агентов, ИТ-администраторов и бизнес-спонсоров встроенный интерфейс — самый быстрый способ получить обоснованный ответ.

Вы можете получить доступ к отзывам и оценкам с помощью встроенного в продукт агента Аналитики, если для выбранного агента включена отправка отзывов и ваше право собственности подтверждено.

Программный доступ с Work IQ

Если вам нужны показатели использования или отзывы в собственных системах (например, для отправки еженедельной системы показателей внедрения, заполнения панели мониторинга или добавления проверки использования в автоматический конвейер), используйте Work IQ. С помощью командной строки и конечных точек вы можете программно запрашивать поддерживаемые метрики использования и отзывы, а также интегрировать результаты в свои рабочие процессы. Программный доступ Work IQ — это лимитная возможность на основе потребления, оплачиваемая с помощью кредитов Copilot.

Область действия агента

Агент Insights имеет узкую область. Следующие возможности в настоящее время находятся вне области и обрабатываются отдельными возможностями:

  • Анализ отдельных пользователей. Отчет аналитики использования использует только агрегированные показатели. Агент не отслеживает, какие именно пользователи использовали агент.
  • Тенденции установки и удаления. Сигнал установки в настоящее время не подключен к уровню данных агента Аналитики.
  • Глубина вовлеченности и качество сеанса. Для этих метрик требуется либо удостоверение на уровне пользователя, либо более подробные данные телеметрии, чем на текущем уровне данных.
  • Отзывы для агентов, которые вам не принадлежат. Видимость использования не устанавливает право собственности. Агент возвращает отзыв только после проверки права собственности.
  • Личность отправителя и содержимое беседы. Результаты отзыва не включают личность отправителя, контекст ИИ, запросы, ответы, расшифровки или содержимое беседы.
  • Ограниченные выводы на основе отзывов. Агент не делает вывод из отзывов о производительности труда, защищенных или чувствительных личных характеристиках, внутренних или эмоциональных состояниях или отношении к рабочему месту.