Вкладки редактора промпта
Редактор промпта разделён на вкладки. Часть из них появляется не всегда — состав зависит от типа промпта и от настроек проекта.
| Вкладка | Что настраивается | Когда доступна |
|---|---|---|
| Промпт | Системная инструкция для LLM, провайдер и модель | Всегда |
| Схема данных | Структура ответа LLM | Всегда |
| UI Конфиг | Виджеты для отображения результата | Кроме промпта-условия |
| Оценка | Правила подсчёта балла по критериям | Кроме промпта-условия |
| Коучинг | Какие критерии отслеживать в планах развития | Когда коучинг включён в проекте и это не промпт-условие |
На вкладках UI Конфиг и Коучинг появляется точка-индикатор, когда там что-то настроено, — по ней видно состояние промпта, не открывая каждую вкладку.
Промпт-условие
Переключатель Промпт-условие в шапке редактора меняет назначение промпта: такой промпт не производит оцениваемого результата, а только проверяет условия для мета-пайплайна.
У промпта-условия остаются только вкладки Промпт и Схема данных — оценивать и отслеживать в нём нечего.
При сборке пайплайна списки промптов не смешиваются: в мета-режиме предлагаются только промпты-условия, в обычном — только обычные.
UI Конфиг
Виджеты настраиваются в двух режимах:
- Визуальный — сборка виджетов и их привязки к полям схемы через интерфейс;
- JSON — прямое редактирование конфигурации.
Режимы переключаются на одной вкладке и работают с одной и той же конфигурацией. Визуальный режим недоступен, пока в JSON есть синтаксическая ошибка.
Заголовок виджета — это то название критерия, которое увидят люди: и в карточке разговора, и в задаче коучинга. Подробнее о виджетах — JSON-схема и виджеты SDUI.
Оценка
Вкладка задаёт, как ответы LLM по критериям превращаются в балл шага: вес каждого критерия, значение «неприменимо» и поведение стоп-факторов. Полное описание — Критерии и стоп-факторы.
Две возможности этой вкладки стоит отметить отдельно.
История правил
Правила оценки версионируются. Каждое сохранение записывает ревизию: что изменилось, кто автор, когда и с какой пометкой. По истории видно, какая правка и когда могла повлиять на баллы.
Изменение правил оценки сохраняется отдельным действием, а не вместе с остальными правками промпта, — см. Оценка качества.
Проверка правил на реальном анализе
Правила можно проверить на уже разобранном разговоре и увидеть, какой балл они дадут.
Проверка считает по текущей сохранённой конфигурации, а не по снимку правил, с которым выполнялся прогон. Это предпросмотр правил, а не оценка оператора — показанное здесь число не совпадёт с его баллом, если правила менялись после прогона.
Коучинг
Вкладка появляется, только когда коучинг включён в настройках проекта. На ней отмечаются критерии, которые нужно отслеживать в планах развития операторов, и задаются пороги по каждому.
Отмечать можно только критерии, уже настроенные на вкладке Оценка. Подробнее — Настройка коучинга.
Порядок правок
Схема данных и вкладка «Оценка» связаны: критерий адресуется по имени поля в схеме.
- Добавляете критерий — сначала схема данных, потом «Оценка».
- Удаляете или переименовываете — сначала «Оценка», потом схема данных.
Система не даст сохранить правку схемы, которая оставит работающий сегодня критерий без поля.
Что дальше
Создание промпта — как завести промпт и его версию.
Критерии и стоп-факторы — настройка вкладки «Оценка».
Настройка коучинга — настройка вкладки «Коучинг».