Вы находитесь здесь:
Тестирование ретривера ансамбля
Протестируйте конфигурацию ансамбля ретривера в рабочей области ретривера моделей на основе искусственного интеллекта, прежде чем использовать его в шаблонах напоминаний или агентах на основе искусственного интеллекта. Добавьте или удалите извлекатели в ансамбль, настройте тестовые данные и параметры результатов для проверки логики извлечения.
Требуемые версии
| Доступно в версиях: Все версии, поддерживаемые Data 360. См. Доступность версии Data 360. |
| Требуемые полномочия пользователя | |
|---|---|
| Для управления извлекателями или версиями в моделях на основе искусственного интеллекта (создание, редактирование, тестирование и удаление) | Разрешение пользователям управлять моделями в моделях на основе искусственного интеллекта ИЛИ Набор полномочий Data Cloud Architect |
| Для доступа к данным с помощью извлекателей | В объекте Knowledge убедитесь, что у пользователя есть доступ для чтения к объекту и полномочие приложения: Разрешить просмотр Knowledge Для всех других стандартных объектов убедитесь, что у пользователя есть доступ для чтения к объекту и соответствующие правила общего доступа. Дополнительную информацию см. в разделе «Установка внутренних единых стандартных параметров общего доступа». |
См. также:
Настройка ретривера ансамбля в рабочей области
-
В моделях на основе искусственного интеллекта на вкладке «Ретриверы» выберите «Тестовый ретривер». Или выберите «Тестовый ретривер для ретривера ансамбля» в раскрывающемся меню действий.
Извлекатели Ensemble, содержащие извлекатели Agentforce Data Library (ADL) или настраиваемые извлекатели SQL, не могут быть протестированы в рабочей области.
- Выберите режим для тестирования ретривера. В базовом режиме рабочая область ретривера возвращает исходную оценку отзыва и время ответа. В расширенном режиме рабочая область возвращает созданную на основе искусственного интеллекта оценку отзыва контекста на основе ожидаемого ответа на тестовый вопрос. Дополнительные сведения о показателях и стоимости см. в разделе «Показатели и результаты ретривера» и «Рекомендации по выставлению счетов для тестирования ретриверов».
-
Выберите ретривер ансамбля для тестирования и проверки.
При поиске извлекателей отображаются только активные извлекатели. Панель конфигурации ретривера отображает отдельные ретриверы, являющиеся частью ретривера ансамбля.
- Чтобы настроить или перенастроить ретривер ансамбля, выберите «Правка».
-
Выберите или отмените выбор извлекателей по пространству данных.
Ретривер ансамбля может содержать не более 10 отдельных ретриверов. Вкладка «Выбрать ретривер» отображает ретриверы, входящие в ансамбль.
-
Измените количество результатов, которые должен вернуть ретривер.
Если результаты на вопрос пользователя не содержат ожидаемого ответа, увеличьте количество возвращенных результатов.
-
Настройте поля, возвращенные ретривером, добавив или удалив существующие поля.
Примечание Ретривер возвращает эти новые поля при сохранении конфигурации и использовании ее с агентами. - (Дополнительно) Включите Параметры цитирования для предварительного просмотра и проверки ссылок от отдельных извлекателей.
Тестирование ретривера
Настройте тестовые данные и введите естественно-языковой запрос для тестирования ретривера. Тестовые данные - это нужный источник, откуда ожидается правильный ответ. С помощью извлекателей ансамблей нужные исходные записи могут быть частью разных извлекателей. В рабочей области можно выбрать тестовые данные из каждого отдельного ретривера, входящего в ансамбль.
- Чтобы протестировать ответы ретривера из ожидаемых источников, выберите «Настроить тестовые данные».
- В окне настройки тестовых данных выберите откат.
-
Выберите объект модели данных, если вы знаете, какие записи содержат ответ или выберите поиск по ключевому слову.
Для гибридных поисковых извлекателей с совпадениями ключевых слов выберите тестовые данные по поиску ключевых слов или записям объектов модели данных. В противном случае, можно выбрать только по записям объекта модели данных. Выберите записи объекта модели данных, если вы знаете, какие записи содержат ответ на тестовый вопрос. Выберите записи на основе поиска по ключевому слову, если вы знаете, что должен содержать ваш ответ, например, для вопроса, связанного с оплаченным отгулом, можно ввести «Отгул» или «Входной».
-
Повторите шаги два и три для каждого ретривера, являющегося частью ансамбля.
Вы можете выбрать не более пяти записей тестовых данных для каждого отдельного ретривера в ансамбле.
-
Задайте тестовый вопрос. В расширенном режиме можно протестировать ответы ретривера на основе ожидаемого ответа на тестовый вопрос.
После выполнения теста панель Test Retriver отображает количество документов, извлеченных ретривером.
На панели результатов просмотрите накладку между верхними фрагментами, возвращенными ретривером, и фрагментами тестовых данных. Проверьте действительность источников со ссылками на ссылки для извлеченных фрагментов. Настройте конфигурацию ретривера с тестовыми данными, чтобы получить оптимальный ответ. Сохраните протестированные конфигурации в качестве новых версий.
