Вы находитесь здесь:
Оптимизация и настройка шаблонов напоминаний
Итеративно улучшайте шаблоны напоминаний для получения последовательных, качественных результатов. Отличные шаблоны напоминаний редко пишутся идеально с первой попытки.
Требуемые версии
| Доступно в версиях: Lightning Experience |
| Доступно в версиях: Enterprise, Performance и Unlimited Edition с надстройкой Einstein for Platform, или Einstein или Agentforce для продаж или обслуживания, или Agentforce Foundations |
Оптимизация — это повторяющийся процесс тестирования, оценки и настройки до тех пор, пока подсказка не выдаст нужный результат. Модели на основе искусственного интеллекта чувствительны к тонким изменениям в формулировках, структурах или инструкциях, а краевые обращения появляются только с реальными данными. Итерация не является признаком неудачи — это процесс, в ходе которого хорошие напоминания становятся отличными.
Семиэтапный цикл итерации
Шаг 1: Запись. Составьте черновик исходного шаблона напоминания. Не стремитесь к совершенству — стремитесь к «достаточно хорошо для тестирования». Начните с четкого определения задачи, базовых инструкций (5-7 ключевых пунктов), важных полей слияния, требований к простому формату и одного или двух ключевых ограничений.
Шаг 2: испытание. Запустите шаблон напоминания с 5-10 разными реальными записями Salesforce. Добавьте типичные обращения, краевые обращения (необычные значения, минимум данных, максимум данных) и записи, которые были проблематичными в прошлом. Сохраните все ответы для оценки и задокументируйте ошибки или сбои.
Шаг 3: Оценка. Сравните результаты с критериями успеха с помощью рубрики оценки. Оцените каждый ответ: соответствует ли он каждому критерию, какой уровень прохождения и являются ли сбои последовательными или случайными?
Шаг 4: Идентификация проблем. Проанализируйте ошибки и схемы. Распространенные категории проблем включают:
- Отсутствующие сведения: Ответ не содержит обязательных элементов, поскольку инструкции их не требуют.
- Неправильный тон: Ответ слишком формальный, слишком случайный или слишком роботизированный, поскольку инструкции по инструктажу нечеткие или отсутствуют.
- Неправильная длина: Ответ слишком длинный или короткий, поскольку ограничение длины отсутствует или игнорируется.
- Плохая структура: Ответ не соответствует ожидаемому формату, поскольку характеристики формата неясны.
- Некорректное содержимое: Ответ содержит неправильную информацию, поскольку поля слияния некорректны или контекст недостаточен.
- Несогласованные результаты: Качество сильно отличается в тестовых сценариях, поскольку инструкции не обрабатывают краевые сценарии.
Шаг 5: Уточнение. Обновите шаблон напоминания на основе полученных знаний.
- Если информация отсутствует, добавьте четкие инструкции, содержащие обязательные элементы.
- Если интонация неправильная, добавьте определенные рекомендации по интонации с примерами.
- Если длина неправильная, добавьте четкое ограничение длины посредством слова или количества символов.
- Если структура неправильная, добавьте подробные характеристики формата.
- Если содержимое некорректно, добавьте больше контекста или исправьте поля слияния.
- Если результаты непоследовательны, добавьте четкую обработку для краевых обращений, например, пустых полей.
Шаг 6: Повторное испытание. Выполните уточненное напоминание по тем же тестовым данным, которые использовались ранее. Измерьте, увеличился ли уровень прохождения, проходят ли предыдущие сбои и не привело ли исправление одной проблемы к новым. Продолжайте повторяться до достижения целевого уровня прохождения, обычно 85-95% для производственного использования.
| Версия | Процент сдачи | Примечания |
|---|---|---|
| Версия 1 | 60% (6/10) | Отсутствуют строки темы, тон слишком формальный |
| Версия 2 | 80% (8/10) | Строки темы исправлены, тон улучшен, но 2 теперь слишком длинные |
| Версия 3 | 90% (9/10) | Длина фиксирована, остался только 1 краевой корпус |
Шаг 7: Развертывание. Как только ваша подсказка постоянно создает качественные ответы, разверните ее в производстве.
Рекомендации по итерации
- Журнал версии. Сохраните каждую версию напоминания с примечаниями к изменениям и причинам, а также уровень прохождения для этой версии.
- Использовать одинаковые тестовые данные в версиях. Это позволяет напрямую сравнивать улучшения.
- При возможности, вносите изменения по одному. Если вы измените три вещи и качество улучшится, вы не знаете, какие изменения помогли. Ранние итерации могут пакетировать несколько исправлений, но более поздние итерации должны внести целевые изменения.
- Запишите, что не сработало. Примечательные подходы, которые вы пробовали, которые ухудшали ситуацию. Это сэкономит время позже.
- Предоставьте группе общий доступ к обучению. То, что вы узнаете об оптимизации одного напоминания, часто применяется к другим.
Распространенные ошибки итерации
- Слишком рано сдаваться. Ожидайте 3-5 итераций перед достижением качества производства. Бюджетное время для этого процесса.
- Не тестирование с реальными данными. Производственные данные не четкие. Всегда используйте фактические записи Salesforce, а не выдуманные тестовые сценарии.
- Изменение слишком многих вещей одновременно. В последующих итерациях внесите целевые изменения, чтобы определить, что работает.
- Пропуск краевых обращений. Добавьте краевые обращения в тестовые данные и обработайте их четко в инструкциях.
- Критериев успеха нет. Определите 2-3 конкретных измеримых критерия успеха перед началом повторения. Без четких целей итерация бесцельна.
Контрольный список оптимизации
Прежде чем считать шаблон напоминания готовым к производству, проверьте данные элементы.
- Протестировано как минимум с 15-20 реальными записями Salesforce
- Уровень прохождения соответствует цели для данного сценария использования (обычно 85-95%)
- Краевые обращения обрабатываются надлежащим образом
- Все критерии успеха выполняются последовательно
- Журнал версии задокументирован с коэффициентами прохождения и примечаниями к изменениям
- Уточнения показывают ощутимое улучшение по сравнению с начальной версией
- Остающиеся проблемы редки и малоэффективны
- Группа рассмотрела и утвердила
