Как научить агента отвечать на открытые вопросы (FPF)

Вы поручили AI-агенту работу, а он остановился с вопросом, для ответа на который вам нужно заново вникать в задачу. Фреймворк первых принципов (FPF) Анатолия Левенчука предлагает методы разбора задач и принятия решений. Агенту можно поручить с их помощью проверить сведения, сравнить варианты и подготовить рекомендацию. Для этого есть скилл — инструкция для агента — fpf-problem-solving от CodeAlive-AI.
Открытый вопрос возникает, когда для продолжения работы нет проверенного ответа или ещё не принято решение. Агент может придумать ответ и ошибиться либо спросить вас. Если он передаёт только вопрос, разбираться в вариантах и последствиях приходится вам.
Как поручить агенту разбор по FPF
Если агенту доступны материалы FPF, например через скилл, добавьте к своей задаче такой запрос:
Используй FPF для разбора этой задачи. Проверь доступные сведения, сравни варианты и предложи решение. Объясни последствия и способ проверки. Если нужен мой выбор, покажи, что именно я должен решить и почему. Не выдавай предположения за факты.
Вместе с задачей дайте агенту документы или данные, которые можно использовать, и укажите, что ему разрешено делать самостоятельно. Например: изучить заявки и предложить новое правило их обработки, пока не меняя рабочую систему. Установка скилла описана ниже.
Пример ситуации с открытыми вопросами на основе системы обработки заявок с сайта
Представим вымышленный бизнес. Клиенты оставляют заявки на сайте, сотрудники обрабатывают их в системе учёта заявок (CRM). Предприниматель поручил агенту доработать обработку повторных обращений.
Клиент может повторить просьбу, потому что ему не перезвонили, или сделать новый заказ с тем же телефоном. Что делать с повторным обращением: создавать новую заявку или связывать с прежней? Бывает и технический сбой, когда одна заявка передаётся дважды. В примере считаем, что система уже умеет распознавать такие повторы.
Вариантов несколько:
- Каждый раз создавать новую заявку. Все обращения видны, но клиенту могут дважды позвонить по одной просьбе.
- Объединять всё с одним телефоном за сутки. Меньше повторов, но два разных заказа могут попасть в одну заявку.
- Дописывать обращение комментарием к прежней заявке. История собрана вместе, но новая просьба может затеряться.
- Создавать заявку с пометкой «возможный повтор». Менеджер увидит оба обращения, но потратит время на проверку.
- Сначала передавать похожие обращения менеджеру. Он решит, нужна ли новая заявка, но до этого заказ будет ждать.
В FPF есть разные методы. Для этого примера подходит метод оценки полезности и выполнимости совета. Предложение «пусть менеджер разберётся» нужно дополнить: кто займётся проверкой, успеет ли он и что будет с заявкой во время ожидания.
Вопрос «Что делать с дублями?» оставляет весь разбор предпринимателю. Подготовленный ответ может выглядеть так — это учебный пример моей интерпретации метода:
Предлагаю сохранять каждое новое обращение отдельной заявкой. При совпадении телефона и текста за сутки — ставить пометку «возможный повтор» и показывать менеджеру прежнюю заявку. Совпадение не доказывает дубль, поэтому объединение оставим менеджеру.
Так новый заказ останется на виду даже при ошибочной пометке. Цена — лишние заявки и время сотрудника на проверку.
Нужно ваше решение: что для бизнеса хуже — лишний звонок или пропущенный заказ? Кто сможет проверять пометки? Если свободного сотрудника нет, этот вариант нужно пересмотреть.
Что остаётся решить человеку
В примере агент подготовил варианты и рекомендацию. Предпринимателю нужно выбрать допустимый риск и назначить сотрудника. Это точка решения человеком (human gate): агент ждёт ответа перед изменением системы. После запуска менеджер будет решать другой вопрос — относятся ли конкретные обращения к одному заказу.
Так можно уменьшить нагрузку при участии человека в работе агента (Human-in-the-Loop, HITL). Человек получает сведения и сравнение вариантов вместе с вопросом. В этом примере остановка остаётся необходимой: агент не знает приоритетов владельца и не может сам назначить сотруднику новую обязанность.
Если предприниматель выбрал правило, до запуска нужно проверить три случая: клиент повторил просьбу, клиент сделал другой заказ, система повторно передаёт заявку из-за сбоя. После запуска — посмотреть, сколько пометок ошибочны и успевает ли менеджер их разбирать. Если менеджер не успевает разбирать повторы, нужно менять правило или выделять на проверку больше времени.
Как попробовать на своей задаче
Сначала проверьте, поддерживает ли ваш агент скиллы. В таком агенте можно установить fpf-problem-solving, который помогает находить нужные разделы FPF. Это сторонняя разработка CodeAlive-AI.
Как установить скилл
На компьютере с установленным Node.js откройте терминал — программу для ввода команд — в рабочей директории проекта и выполните:
npx skills add CodeAlive-AI/ai-driven-development --skill fpf-problem-solving
Установщик предложит выбрать агент и место установки. Если вы не работаете с терминалом, передайте эту команду человеку, который настраивает вашего агента. Инструкция CodeAlive-AI и документация установщика описывают доступные варианты.
Попросите агента подтвердить, что он может прочитать скилл и нужные разделы FPF. Одна ссылка в сообщении ещё не означает, что агент получил их содержимое. В обычном чате без поддержки скиллов способ передачи материалов будет другим; его нужно проверить в вашем инструменте.
Выберите одну незавершённую задачу — например, обработку заявок или выбор рекламного теста. Передайте её агенту с запросом из начала статьи. В ответе проверьте:
- На какие документы и данные он опирается, что осталось предположением.
- Какие варианты сравнил и почему рекомендует один из них.
- Кто выполнит предложенную работу и как проверить результат.
- Какой конкретно выбор требуется от вас.
Попросите назвать применённый раздел FPF и объяснить, как он повлиял на рекомендацию. Упоминания названия метода недостаточно: ответ должен помогать принять решение по вашей задаче.
Технические детали и схема — для разработчиков
По условию примера каждая отправка формы получает номер (event_id), который не меняется при повторной доставке сообщения. Он помогает заметить технический повтор. Но разные номера ещё не означают разные потребности: клиент мог дважды отправить одну и ту же форму. Совпадение телефона тоже не доказывает дубль: один человек может оставить две разные заявки.
Запись в журнале ещё не означает успешную обработку. Если карточка не создана из-за сбоя, повторная доставка должна позволить завершить обработку. Если карточка создана, но ответ CRM потерян, система сначала восстанавливает результат предыдущей попытки по event_id. Так повтор не приводит ни к потере заявки, ни к созданию второй карточки. Это условие безопасного повтора, описанное в разборе повторной обработки запросов AWS.
Проверки реализации
| Ситуация | Ожидаемый результат |
|---|---|
| Первая доставка сообщения | Создана одна карточка; её связь с event_id сохранена |
| Повтор после успешного создания карточки | Доставка записана в журнал; второй карточки нет |
| Сбой после записи доставки в журнал, до создания карточки | Повтор завершает обработку; в CRM появляется одна карточка |
| Карточка создана, но ответ CRM потерян | Система находит результат предыдущей попытки; второй карточки нет |
Новый event_id, прежняя потребность, тот же телефон и текст в течение суток |
Создана карточка с меткой и ссылкой; менеджер может объединить историю обращений |
Новый event_id, другая потребность того же клиента |
Создана отдельная карточка; даже при совпадении текста метка не вызывает автоматического объединения |
Сообщение без event_id |
Сообщение сохранено для ручного разбора |
Термины
- Фреймворк первых принципов (FPF) — набор способов разбирать вопросы и проверять основания решений.
- Система учёта заявок (CRM) — программа, в которой команда ведёт карточки заявок и историю обращений клиентов.
- Номер сообщения (
event_id) — идентификатор отправки формы; в условии примера он остаётся тем же при повторной доставке сообщения. - Скилл агента — готовая инструкция для определённого типа задач.
- Открытый вопрос — в задаче AI-агента вопрос, на который нельзя ответить по доступным проверенным данным или принятому правилу. Чтобы продолжить, нужно проверить факт, сравнить варианты или получить решение человека.
- Точка решения человеком (human gate) — остановка работы агента, после которой дальнейший шаг зависит от решения или подтверждения человека. Если агент не передал контекст и варианты, человеку приходится разбираться в задаче заново.
- Участие человека в работе агента (Human-in-the-Loop, HITL) — организация работы, при которой человек включается в процесс: проверяет результат, уточняет условия или подтверждает действие. Human gate — конкретная точка такого участия, в которой агент ждёт решения человека.
Источники
- Анатолий Левенчук, First Principles Framework — первоисточник, авторство и назначение FPF.
- How to use FPF and its DPF Suites — рекомендация автора начинать с конкретной ситуации и выбирать подходящий способ работы.
- FPF Core Specification — подробное описание способов уточнять вопросы и проверять решения; документ объёмный и обновляется.
- FPF C.11.DUA: Make Advice and Evidence Demands Worth Their Burden — метод оценки полезности совета и работы, которую он требует от получателя; в примере использованы разделы 4.1, 4.2 и 4.4.
- AWS Builders’ Library: Making retries safe with idempotent APIs — связь идентификатора запроса с результатом операции и обработка повторов после сбоев.
- LangChain: Human-in-the-loop — пример реализации HITL: агент приостанавливается, а человек подтверждает, меняет или отклоняет предложенное действие либо отвечает на вопрос.
- CodeAlive-AI,
fpf-problem-solving— сторонний скилл и инструкция по установке.
Хотите внедрить это у себя?
Помогаю командам перейти на агентную разработку: как советник, через обучение команды или внедрение изменений с проверкой эффекта по данным. Короткие заметки между статьями выходят в Telegram-канале.