← Все кейсы

Сергей — входящие продажи и работа с заявками

Панель контроля работы ИИ-агента с клиентами

Телефон или сообщение открывают один экран - что агент понял, какое решение принял, куда передал клиента и что произошло дальше.

Перейти к разбору

Панель контроля работы ИИ-агента с клиентами

1 / 6
Обезличенная панель диагностики ИИ-агента на мониторе и вопрос о том, что агент сделал с клиентом.
По одному обращению видно, что агент получил, какое правило сработало, куда ушел клиент и что произошло после. На экране - реальная обезличенная панель диагностики.
Содержание разбора

для Сергея собрал диагностику поверх работающего ИИ-агента. Она помогает открыть конкретное обращение и понять, что произошло между сообщением клиента, решением модели, действиями в СРМ и ответом

до доработки части этой истории находились в разных сценариях n8n и технических журналах. У каждого запуска был свой номер. Чтобы разобраться с вопросом почему бот замолчал, приходилось вручную восстанавливать последовательность

я связал события одним идентификатором и сделал рабочий экран в Графане. Сотрудник начинает с телефона, ссылки или фразы, а технические подробности открывает по необходимости

Что получает поддержка

Конкретное обращение, причина
и то, что произошло после

Найти обращение по тому, что уже есть

на рабочем экране есть поле поиск. В него можно вставить телефон, ВК id, ссылку, часть сообщения или технический идентификатор

по одному клиенту может найтись несколько обращений. Поэтому сначала сотрудник открывает 1 - обращения и выбор trace, выбирает нужную ветку по времени и тексту, затем уточняет поиск ее номером

Поиск в Графане: вставить ВК id, телефон, trace или текст, выбрать обращение и уточнить поиск

не нужно заранее знать внутренний номер запуска. Поиск начинается с информации, которую сотрудник уже получил вместе с обращением клиента

От причины к последствиям

после выбора обращения экран ведет по понятному порядку

  1. 2 - диагноз показывает причину и источник решения
  2. 3 - что было после показывает дальнейшие действия
  3. 4 - ошибки собирает связанные сбои
  4. Сырье и ссылки дает разработчику технические события и переход к нужному запуску

важно различать остановку из-за ошибки и предусмотренную передачу человеку. Если агент уже вышел из разговора, отсутствие нового ответа само по себе еще не объясняет причину. Нужно увидеть, кто и каким правилом изменил режим

словарь диагноза строится по полям событий. Он различает передачу человеку, таймаут, пробел в базе знаний, входящее изменение из СРМ и другие проверенные классы. Новый тип причины можно добавить, сохранив общий путь разбора

Что стало видно на реальном обращении

в одном обращении короткая цифровая реплика включила режим человека. Панель показала правило, которое приняло это решение, и последующие события

Строка диагноза: короткая цифровая реплика включила human

после включения этого режима один ответ бота еще успел уйти клиенту. Дальше агент перестал вести разговор. Общий след позволил увидеть именно такую последовательность, вместо общего объяснения бот не отвечает

разработчик получает место для проверки перехода и отправки ответа

Как обращение проходит через разные системы

для сквозной связи внедрил общий trace_id. Он проходит вместе с обращением через получение сообщения, подготовку контекста, ИИ, СРМ, отправку ответа и обработку ошибки

в Телеграме один след объединяет семь связанных сценариев n8n

n8n связывает действия

Передает общий идентификатор между сценариями и добавляет события о решениях и результатах

Loki хранит события

Позволяет собрать события одного обращения, включая связанную ошибку

Grafana объясняет ход работы

Показывает выбор обращения, диагноз, последствия и ошибки в одном порядке

PostgreSQL сохраняет связь

Помогает восстановить контекст между запусками, если очередной этап не получил его напрямую

Диагностика не должна задерживать ответ клиенту

отправка событий в журнал сделана асинхронно. Из записи убираются секреты и тяжелые поля. Рабочий разговор не должен ждать ответа сервиса диагностики

Что изменилось для команды

я превратил разрозненные технические события в последовательный разбор одного обращения. Сотрудник находит нужный диалог и видит причину вместе с продолжением

если нужна правка, разработчик получает конкретный запуск и связанное событие. Команде проще обсуждать ситуацию по фактам и передавать ее тому, кто может исправить причину

На чем собрано

n8n · Loki · Grafana · PostgreSQL · Vtiger CRM · Телеграм · ВК