Человек в контуре ИИ: где подтверждение обязательно
После пилота «пусть агент сам» обычно всплывает одно и то же: скидка ушла без согласования, клиенту пообещали срок, которого нет в договоре, или в CRM сменился статус заказа без следа. Ниже — где в контуре человек обязателен, а где подтверждение можно сужать. Стартовая рамка пилота — в статье с чего начать внедрение ИИ.
Автономность — не KPI
Цель контура — стабильный процесс с понятной ценой ошибки. Доля шагов без человека — следствие, когда качество на выборке уже не прыгает. Если KPI звучит как «агент всё делает сам», вы оптимизируете театр, а не экономику.
- Есть журнал: кто (модель или человек) сделал шаг, на каких данных, чем закончилось.
- Есть канал эскалации: спорный кейс не «зависает в чате», а уходит сменщику.
- Деньги, юридические обещания и удаление данных — только после человека.
- Лимиты на инструменты: нельзя «вызвать любой API», пока сценарий не закрыт тестами.
ПрактикаСнимать подтверждение с ветки можно, когда на 50–100 свежих диалогах ошибка редкая и цена ошибки терпимая. Иначе вы экономите клик и покупаете разбор инцидента.
Где человек остаётся в контуре
| Действие | Автопилот? | Почему | Что логировать |
|---|---|---|---|
| Ответ из регламента / FAQ | Да, если уверенность высокая | Цена ошибки — повторный вопрос | Источник, версия документа |
| Смена статуса заказа | Нет, пока пилот | Ломает склад и обещание клиенту | Было / стало, кто подтвердил |
| Скидка, возврат, оферта | Нет | Юрответ и маржа | Сумма, основание, сотрудник |
| Рассылка / массовое API | Нет | Необратимый охват | Размер выборки, текст |
| Удаление или выгрузка ПДн | Нет | 152-ФЗ и репутация | Запрос, объём, основание |
У ИИ-агента с вызовом инструментов риск выше, чем у ассистента «только поиск». Разница уровней — в материале про агентов для бизнеса: сначала чтение, потом запись, и то по белому списку.
Как сужать подтверждения, а не выключать их разом
- Зафиксировать пилот: один сценарий, исходная метрика, дата решения.
- Собрать набор «спорных» кейсов — не идеальных демо.
- Держать человека на всём, что меняет деньги или обязательства.
- Снимать HITL только с веток, где регрессия зелёная две-три недели подряд.
Нужен контур с журналом и политикой доступа, а не «подключить модель» — это внедрение ИИ как услуга: пилот, рамка, эскалация.
Частые вопросы
Можно ли сразу отдать агенту CRM на запись?
Нет. Сначала чтение и черновик статуса, подтверждение человеком. Запись — когда журнал и регрессия уже есть.
Что считать эскалацией, а не «просто чат с коллегой»?
Тикет или сообщение с контекстом, правилом и сроком реакции. Иначе спорный кейс растворяется в ленте.
Когда снимать подтверждение с типовых ответов?
Когда доля эскалаций стабильна, жалоб на тон нет, а на выборке нет «уверенных» ошибок по фактам.
Нужен ли отдельный человек-супервизор?
На пилоте — да, хотя бы часть ставки. Без владельца качества контур никто не убивает и не улучшает.
Чем HITL отличается от «человек всё равно переписывает ответ»?
HITL — точечное подтверждение опасного шага. Если оператор переписывает каждое сообщение, у вас нет автоматизации, есть дорогой черновик.