Просмотр активности агента

Создание агента — это итеративный процесс. Это включает понимание того, как работают ваши агенты, внесение изменений и видение результатов. Этот процесс помогает создавать лучших агентов. Отслеживание активности Copilot Studio обеспечивает визуальное отображение последовательности вводов, решений и выходов ваших агентов внутри активности, чтобы вы могли находить проблемы и возможности для улучшения.

Для каждой активности формируется карта активности . Активность начинается, когда агент начинает разговор или внешнее событие запускает агента. Карта представляет каждую активность с узлом.

Существует два типа отслеживания активности:

• Карта активности в режиме реального времени вашего агента во время тестирования
• Исторические карты деятельности и расшифровки прошлых мероприятий

Карта активности в реальном времени во время тестирования

Когда вы задаёте агенту вопрос в тестовой панели, карта активности показывает визуальное представление плана, который агент создал. Карта выделяет ошибки, такие как отсутствующие или некорректные входные или выходные параметры действий, а также показывает, сколько времени занимает выполнение каждого шага. Вы также можете убедиться в правильности информации, которую отправляет или получает ваш агент.

Чтобы карта активности автоматически появлялась при отправке запроса агенту в тестовой панели, выберите три точки (...) и включите Показать карту активности при тестировании.

Здесь пользователь спросил: «Какая будет погода завтра в Торонто, Канада?» Вы можете увидеть действие, выбранное агентом для ответа, а также входы и выходы.

Триггеры тестового события

Когда вы тестируете триггеры событий, тестовый чат показывает нагрузку триггера в виде сообщения. Только вы можете увидеть это сообщение внутри Copilot Studio для целей тестирования. Пользователи вашего агента этого не видят. Используйте сообщения полезной нагрузки, чтобы понять, когда и какую информацию и инструкции триггер отправляет вашему агенту.

Отслеживание между темами

Когда вы тестируете своего агента, вы можете отслеживать между темами. Когда вы включаете отслеживание, карта активности показывает узлы внутри темы по мере их запуска, когда тема запускается в рамках плана. Вы можете следить за ходом разговора.

Просмотр переменных

На странице активности вы можете просмотреть переменные, используемые вашим агентом во время тестирования или в исторических действиях. Эти переменные могут быть глобальными, окружающими или системными, к которым агент имеет доступ.

Чтобы посмотреть переменные, используемые во время активности:

1. Перейдите на страницу активности . Появится список действий.
2. Чтобы просмотреть переменные во время тестирования, выберите Test и Variables. Открывается панель «Переменные », показывающая переменные, используемые при тестировании.
3. Чтобы просмотреть переменные в исторической активности, выберите активность из списка. Затем выберите Переменные. Открывается панель «Переменные », показывая переменные, используемые во время этой активности.

Просмотр цепочки мыслей агента в тестовом чате

Функция Chain of Thought (CoT) даёт представление о процессе рассуждений вашего агента во время тестирования. Он отображает промежуточные шаги, соображения и решения, принимаемые агентом при обработке входных данных и генерации выходных данных. Эта функция полезна для понимания сложных взаимодействий и отладки поведения агентов.

Чтобы увидеть цепочку мыслей или рассуждений агента во время тестирования, следуйте следующим шагам:

1. Откройте агент в Copilot Studio. Появится страница Обзор.
2. Выберите «Тест », чтобы открыть панель теста.
3. В панели тестирования начните разговор с вашим агентом, введя запрос или запрос.
4. Перед ответом агент на панели теста появляется рассуждение, показывая цепочку мыслей для ответа агента.

Историческая активность

Каждый раз, когда агент запускает активность, включая тесты, которые вы запускаете в Copilot Studio, страница Activity фиксирует активность в реальном времени. Перейдите на страницу Действие, чтобы:

• Проанализируйте взаимодействия и решения, которые ваш агент принял во время активности.
• Найдите то, где поведение агента не соответствует вашим целям.
• Посмотрите, сколько времени занимает ваш агент на выполнение каждого задания.
• Найдите детали об ошибке.

Деятельность по историческому агенту доступна для:

• Взаимодействия в Copilot Studio тестовом чате
• Агенты публиковались на каналах Microsoft Teams и Microsoft 365 Copilot
• Агенты опубликованы на канале SharePoint
• Деятельность, начавшаяся с автономного триггера

Ознакомьтесь с следующей информацией на странице Активности :

• Список мероприятий и их детали.
• Пошаговый диалог, который происходит в рамках активности.

Список мероприятий

Деятельность — это единица взаимодействия агента, включающая разговор с пользователем, регистрацию и реагирование на события, либо комбинацию этих действий.

В списке активностей вы можете увидеть:

• Имя: Имя пользователя, взаимодействующего с агентом. Если активность не связана с пользователем, например, когда агент выполняет действия без подсказки человека, пользователь отображается как автоматизированный.
• Каналы: Канал, где происходило взаимодействие. Действия, происходящие на панели тестирования агентов, имеют значок Copilot Studio.
• Дата: Дата, когда начинается первое взаимодействие с мероприятием.
• Выполненные шаги: количество шагов, которые агент выполняет во время действия.
• Последний шаг: Последний шаг выполненного задания.
• Статус: Статус активности (успешно, невыполнено, в процессе).

Настройте просмотр таблицы активности

Вы можете настроить просмотр таблицы активности, чтобы сосредоточиться на наиболее релевантной для вас информации.

Чтобы настроить просмотр таблицы активности:

1. Перейдите на страницу активности вашего агента. Появится список действий.
2. Выберите Редактировать колонки. Панель колонок «Редактировать» отображается со списком доступных столбцов.
3. В панели колонок «Редактировать »:
   • Выберите галочку рядом с названиями столбцов, которые хотите показать.
   • Очистите галочку рядом с названиями столбцов, которые хотите скрыть.
   • Перетащите столбцы в предпочитаемую последовательность или используйте стрелки вверх и вниз.
4. Выберите «Сохранить », чтобы подтвердить и обновить просмотр таблицы активности.

Просмотр беседы внутри активности

На странице активности вы можете просмотреть разговор внутри активности либо в визуальной карте активности, либо в стенограмме беседы и визуальной карте активности. По умолчанию отображается вид Транскрипт + Карта .

1. Чтобы увидеть разговор внутри активности, выберите активность.

   • Чтобы просмотреть транскрипт и карту активности вместе, выберите Просмотр , а затем Транскрипт + Просмотр карты.
   • Чтобы посмотреть только карту активности, выберите «Посмотреть », а затем «Просмотр карты».

   

2. Чтобы вернуться в список активностей, выберите значок «Назад ».

Вид Транскрипт + Карта показывает разговор, произошедший с агентом во время активности, а также визуальную карту активности. Транскрипт фиксирует пользовательский ввод, триггерные нагрузки и ответы агентов. Используйте расшифровки, чтобы увидеть, как ваш агент реагирует на разговоры с пользователями. Вы также можете увидеть сообщения полезной нагрузки триггера, которую ваш агент получает от триггеров событий.

Просмотр цепочки мыслей агента

Функция «Цепочка мыслей» (CoT) даёт представление о процессе рассуждений вашего агента во время деятельности. Он отображает промежуточные шаги, соображения и решения, принимаемые агентом при обработке входных данных и генерации выходных данных. Эта функция полезна для понимания сложных взаимодействий и отладки поведения агентов. Вы можете просматривать цепочку мыслей агента по конкретной деятельности только в представлении Карты.

Чтобы увидеть цепочку мыслей или рассуждений агента по конкретной деятельности:

1. Во вкладке «Активность » выберите активность, которую хотите просмотреть. По умолчанию отображается вид Транскрипт + Карта .
2. В карте активности выберите шеврон Reasoning . Появляется цепочка мыслей агента.

Активность закрепления или разблокировки

На странице Активности вы можете закрепить важные активности вверху списка для удобного доступа или снять их, когда они больше не нужны.

• Чтобы закрепить активность, наведите курсор на активность и выберите значок PIN рядом с именем.
• Чтобы раскрепить активность, наведите курсор на закреплённую активность и выберите значок Unpin рядом с именем.

Просмотр всех действий агента на карте действий

Вид карты — это визуальное представление потока вводных данных, решений и реакций, происходящих во время деятельности. Каждое действие, которое ваш агент, пользователь или триггер выполняет с узлом. При просмотре карты активности выберите узел, чтобы увидеть детали входов, решений и выходов для этой активности.

Следующее изображение — пример того, что вы видите при выборе узла знаний. В нем показано:

• Запрос, который агент использовал для поиска источников знаний. Он может отличаться от запроса, записанного пользователем, или от ввода, предоставленного триггером.
• Ответ, который агент создал на основе источников знаний.
• Источники, на которые ссылался агент.
• Другие источники агент искал, но не использовал для создания ответа. Агент обыскал эти источники, но не нашёл информации, относящейся к запросу.

В этом примере вы можете увидеть детали узла действия для Получить прогноз завтра , показывающего входные и выходные данные:

Выберите «Редактировать », чтобы просмотреть и изменить конфигурацию, связанную с выбранной деятельностью.

Логическое обоснование

Rationale объясняет, как агент решил вызвать определённый инструмент. ИИ генерирует обоснование по требованию и основывается на метаданных и активности агента. Отображение обоснований для источников или коннекторов знаний о состоянии завершения . Выберите «Показать обоснование», чтобы показать обоснование.

При проверке активности агента используйте Rationale , чтобы лучше понять, почему агент выбрал определённый инструмент или заполнить параметры. Это полезно для устранения проблем с поведением агентов. Однако, поскольку обоснование генерируется с помощью ИИ, оно может быть неточным, поэтому используйте своё лучшее суждение при рассмотрении предоставленной аргументации.

Состояние агента

Следующая таблица содержит информацию о различных состояниях, с которыми агент может столкнуться во время своей работы:

Отправка отзывов

Если у вас есть предложения по улучшению качества вашего агента, отправьте свои отзывы, используя значок Feedback во вкладке Activity .