Как улучшить и тестировать промпт?
WiseLab · Обновлено
Улучшайте промпт через измеримый результат: опишите задачу, входные данные, допустимый формат и критерии качества. Проверяйте не один удачный ответ, а одинаковый набор реальных примеров, включая сложные случаи.
Как устроить проверку
Сначала зафиксируйте 10–20 типовых запросов и ожидаемые признаки хорошего результата. Меняйте за раз один элемент: контекст, инструкцию, пример или формат вывода. Сравните версии по полноте, точности, соблюдению формата и времени ручной доработки; сохраните удачный вариант вместе с тестовым набором.
Как применить
- Сформулируйте цель и критерии приемки ответа.
- Прогоните старый и новый промпт на одном наборе примеров.
На примере
Учебный пример: вместо «сделай отчёт» укажите период, метрику, источник данных, таблицу полей и правило для неизвестных значений.
Улучшение на одном демонстрационном примере не подтверждает качество в рабочем потоке.
Источники
Подготовлено с помощью ИИ по указанным источникам. Примеры с условными данными используются для объяснения и не описывают результаты клиентов.