Rubric Prompting

Rubric prompting («промптинг по рубрике») даёт модели явную оценочную рубрику — названные критерии, каждый с определённой шкалой и описанием того, что означает каждый балл, — чтобы её суждения были последовательными и обоснованными, а не смутным «на глаз». Приём встречается в двух местах: в управлении генерацией («пиши так, чтобы соответствовать этим критериям») и, чаще, в оценке LLM-as-judge, где модель выставляет баллы чужим выводам. Без рубрики LLM, которого просят «оценить ответ от 1 до 10», плывёт: один и тот же вывод получает разные баллы от запуска к запуску, а шкала ничего не значит. Рубрика фиксирует шкалу — например, «Точность (1-5): 5 = каждое утверждение проверяемо, 3 = одна мелкая ошибка, 1 = грубая фактическая ошибка». Для SaaS-разработчиков rubric prompting — костяк автоматических оценок качества и градации контента: он делает баллы воспроизводимыми, проверяемыми и сравнимыми между версиями промпта. Хорошая практика — оценивать по одному критерию за раз, просить краткое обоснование перед числом и сверять судью с выборкой человеческих оценок, прежде чем масштабировать.