Изменение деталей тестового набора

Используйте тестовые наборы для оценки и уточнения того, как ваш агент обрабатывает реальные сценарии реакции. В этой статье объясняется, как изменить название и настройки тестового набора, управлять профилем пользователя и соединениями для аутентификации, редактировать или удалять отдельные тестовые случаи, а также удалять целые тестовые наборы или результаты. Эти шаги помогают убедиться, что оценки отражают правильный контекст пользователей и обеспечивают безопасный доступ к источникам знаний и инструментам.

У вас есть выбор из трёх методов тестирования, также называемых оценителями, для оценки ответов агентов: качество, сходство и соответствие текста. Для получения дополнительной информации о различных методах тестирования см. раздел «Методы тестирования».

Редактировать детали тестового набора

Вы можете менять детали тестового набора, например, какой аккаунт используется для аутентификации и используемые методы тестирования.

1. Перейдите на страницу оценки вашего агента.

   

2. Выберите тестовый набор.

3. В тестовом наборе выберите тестовый кейс, который хотите отредактировать.

4. По желанию изменить название тестового набора.

5. Добавьте или измените методы тестирования. Каждый метод тестирования измеряет разные значения и требует различных конфигураций. Чтобы узнать, как настроить каждый метод тестирования, см. раздел «Выбрать методы тестирования».

   Метод испытаний	Меры	Тип тестового набора	Очки	Конфигурации
   Общее качество	Насколько хорош ответ(ы) тестового случая в зависимости от конкретных качеств	Один ответ или разговор	Оценка из 100%	нет
   Сравнение значений	Насколько смысл ответа тестового случая соответствует ожидаемому ответу	Одиночный отклик	Оценка из 100%	Сдачный балл, ожидаемый ответ
   Использование возможностей	Использовал ли тестовый случай все или какие-либо ожидаемые ресурсы	Одиночный отклик	Передача или сбой	Ожидаемые возможности
   Совпадение ключевых слов	Использовали ли тестовый случай все или какие-либо из ожидаемых ключевых слов или фраз	Один ответ или разговор	Передача или сбой	Ожидаемые ключевые слова или фразы
   Сходство текста	Насколько хорошо текст ответа тестового случая соответствует ожидаемому ответу	Одиночный отклик	Оценка из 100%	Сдачный балл, ожидаемый ответ
   Точное совпадение	Точно ли ответ тестового случая соответствует ожидаемому ответу	Одиночный отклик	Передача или сбой	Ожидаемый ответ
   Пользовательский	Соответствует ли ответ тестового случая вашим установленным критериям или ожиданиям.	Один ответ или разговор	Сдал/непроход (проходит определённые критерии меток)	Имя, инструкции по оценке, ярлыки

6. Выберите «Управление профилем » для добавления аккаунта, или выберите текущий профиль для управления связями или выберите другой профиль. Автоматизированное тестирование использует аутентификацию выбранного тестового аккаунта. Многопрофильная оценка поддерживается только для агентов без зависимости от коннекторов. Если у вашего агента есть источники знаний или инструменты, требующие специальной аутентификации, вы можете выбрать подходящий аккаунт для тестирования. Для получения дополнительной информации смотрите раздел Управление профилями пользователей и соединениями.

Управление профилями пользователей и соединениями

Вы можете запускать тестовые наборы, используя аутентификацию учетной записи пользователя. Этот метод аутентификации позволяет вашему агенту получить доступ к источникам знаний и инструментам, необходимым для достижения своих целей.

Вы можете использовать профили для моделирования конкретного пользовательского опыта. Например, профиль пользователя директора может получать доступ к другим источникам знаний, чем профиль стажёра, и агент возвращает разные результаты. Многопрофильная оценка поддерживается только для агентов без зависимости от коннекторов.

Результаты тестов показывают, какой пользовательский профиль был использован.

Чтобы добавить или изменить профиль пользователя в тестовом наборе:

1. Откройте тестовый набор, затем выберите Управление профилем.

   

2. Выберите выпадающее меню пользователя , затем:

   • Выберите пользовательский аккаунт, который хотите использовать, или
   • Выберите « Добавить аккаунт», затем войдите в аккаунт.

   

3. Для подключений с предупреждением выберите соединение. Измените существующее соединение на рабочее, выберите Reconnect , чтобы попытаться восстановить существующее, или выберите Create new connection , чтобы попробовать новое соединение.

4. Для новых соединений введите запрошенные данные, затем выберите Connect.

5. Когда все соединения работают, выберите «Сохранить».

Удалить тестовый набор или результат теста

Вы можете удалить тестовый случай или набор, который вам больше не нужен.

1. Перейдите на страницу оценки вашего агента.
2. В разделе «Тестовые наборы » удалите тестовый набор, выполнив один из следующих шагов:
   • Выберите три точки (...) на карточке тестового набора, а затем выберите Удалить.
   • Выберите тестовый набор, чтобы открыть его, затем выберите три точки (...) в панели Configure тестового набора, а затем выберите Delete.
3. В разделе «Недавние результаты » удалите результат теста, выполнив один из следующих шагов:
   • Наведите курсор на результат теста, который хотите удалить, выберите три точки (...) и выберите Удалить тест.
   • Выберите результат теста, чтобы открыть его, затем выберите три точки (...) в панели сводки оценки и выберите Удалить.