Главная / Словарь / Промпт-инжиниринг что это

Промпт-инжиниринг что это

Промпт-инжиниринг - это дисциплина получения от модели предсказуемого результата: не удачная формулировка, а работающий процесс с проверкой, версиями и примерами. Сам промпт при этом остаётся текстом с задачей, контекстом и форматом, а инжиниринг отвечает за то, чтобы этот текст давал один и тот же результат завтра, на другом наборе данных и после смены модели.

Чем промпт-инжиниринг отличается от подбора формулировок в чате?

Требованием к стабильности. В чате достаточно, чтобы ответ понравился один раз: не понравился, переформулировали и спросили заново, человек рядом. В рабочем процессе тот же промпт отрабатывает тысячу раз без надзора, и оценивается он не лучшим ответом, а худшим и долей ответов, которые пришлось отправить на ручную обработку. Отсюда и разная работа: в первом случае ищут формулировку, во втором строят проверяемую конструкцию и меряют долю брака.

Как проверять качество промпта?

Набором примеров с заранее известным правильным ответом. Собирается два-три десятка реальных случаев, обязательно с трудными и пограничными, к каждому руками записывается ожидаемый результат, и после любой правки промпт прогоняется по всему набору целиком. Без этого улучшение одного случая регулярно ломает пять других, и заметить это можно только в проде. Отдельно проверяется формат: если ответ должен быть структурой с фиксированными полями, разбор ответа кодом и есть первая линия проверки, а всё, что не разобралось, уходит в ручную очередь, а не в базу.

Зачем версионировать промпты?

Потому что промпт - это часть рабочей системы, а не переписка. Он меняется, и после изменения качество может упасть, причём выяснится это по косвенным признакам через неделю. Хранить его стоит там же, где код, с историей правок и пометкой, какой моделью и на каком наборе примеров он проверялся. Смена версии модели поставщиком, кстати, тоже событие для перепроверки: промпт, отлаженный под одну версию, на следующей ведёт себя иначе, и на длинных инструкциях с жёстким форматом разница заметна сразу.