Искусственный интеллект

Человек в контуре ИИ: где подтверждение обязательно

Человек в контуре ИИ: где подтверждение обязательно

После пилота «пусть агент сам» обычно всплывает одно и то же: скидка ушла без согласования, клиенту пообещали срок, которого нет в договоре, или в CRM сменился статус заказа без следа. Ниже — где в контуре человек обязателен, а где подтверждение можно сужать. Стартовая рамка пилота — в статье с чего начать внедрение ИИ.

Автономность — не KPI

Цель контура — стабильный процесс с понятной ценой ошибки. Доля шагов без человека — следствие, когда качество на выборке уже не прыгает. Если KPI звучит как «агент всё делает сам», вы оптимизируете театр, а не экономику.

  • Есть журнал: кто (модель или человек) сделал шаг, на каких данных, чем закончилось.
  • Есть канал эскалации: спорный кейс не «зависает в чате», а уходит сменщику.
  • Деньги, юридические обещания и удаление данных — только после человека.
  • Лимиты на инструменты: нельзя «вызвать любой API», пока сценарий не закрыт тестами.

ПрактикаСнимать подтверждение с ветки можно, когда на 50–100 свежих диалогах ошибка редкая и цена ошибки терпимая. Иначе вы экономите клик и покупаете разбор инцидента.

Где человек остаётся в контуре

ДействиеАвтопилот?ПочемуЧто логировать
Ответ из регламента / FAQДа, если уверенность высокаяЦена ошибки — повторный вопросИсточник, версия документа
Смена статуса заказаНет, пока пилотЛомает склад и обещание клиентуБыло / стало, кто подтвердил
Скидка, возврат, офертаНетЮрответ и маржаСумма, основание, сотрудник
Рассылка / массовое APIНетНеобратимый охватРазмер выборки, текст
Удаление или выгрузка ПДнНет152-ФЗ и репутацияЗапрос, объём, основание

У ИИ-агента с вызовом инструментов риск выше, чем у ассистента «только поиск». Разница уровней — в материале про агентов для бизнеса: сначала чтение, потом запись, и то по белому списку.

Как сужать подтверждения, а не выключать их разом

  1. Зафиксировать пилот: один сценарий, исходная метрика, дата решения.
  2. Собрать набор «спорных» кейсов — не идеальных демо.
  3. Держать человека на всём, что меняет деньги или обязательства.
  4. Снимать HITL только с веток, где регрессия зелёная две-три недели подряд.

Нужен контур с журналом и политикой доступа, а не «подключить модель» — это внедрение ИИ как услуга: пилот, рамка, эскалация.

Частые вопросы

Можно ли сразу отдать агенту CRM на запись?

Нет. Сначала чтение и черновик статуса, подтверждение человеком. Запись — когда журнал и регрессия уже есть.

Что считать эскалацией, а не «просто чат с коллегой»?

Тикет или сообщение с контекстом, правилом и сроком реакции. Иначе спорный кейс растворяется в ленте.

Когда снимать подтверждение с типовых ответов?

Когда доля эскалаций стабильна, жалоб на тон нет, а на выборке нет «уверенных» ошибок по фактам.

Нужен ли отдельный человек-супервизор?

На пилоте — да, хотя бы часть ставки. Без владельца качества контур никто не убивает и не улучшает.

Чем HITL отличается от «человек всё равно переписывает ответ»?

HITL — точечное подтверждение опасного шага. Если оператор переписывает каждое сообщение, у вас нет автоматизации, есть дорогой черновик.

← Назад к разделу «Искусственный интеллект»