Промпт-инжиниринг по-инженерному: версии, тесты и бюджеты

Промпт - не магия, а артефакт

Если промпт живёт "где-то в коде" и его правят наугад, качество гуляет. Относитесь к нему как к коду: версии, тесты, метрики.

Что это значит на практике

• Версионирование: храните системный промпт в файле/конфиге, а не зашитым в строку. Изменения - через коммиты.
• Набор тестов: 10-20 типичных входов с ожидаемым поведением. После правки промпта прогоняете и смотрите, не сломалось ли старое.
• Бюджет: считайте токены и стоимость на запрос. Большой неизменный контекст - кандидат на кэширование.

Приёмы, которые стабильно помогают

• Чёткая роль и формат ответа (например, "верни JSON по схеме").
• Примеры (few-shot) вместо длинных объяснений.
• Для сложных задач - попросить рассуждать по шагам, для простых - наоборот, краткость.

Инженерный подход к промптам превращает "иногда работает" в "работает предсказуемо".