Пилот AI-ассистента: как оценить результат за несколько недель

Пилот нужен, чтобы увидеть работу AI-ассистента на ваших разговорах, а не на демонстрационных. Но без критериев он легко превращается в «вроде работает». Одному в команде кажется, что ответы стали быстрее, другому, что клиенты путаются, и разрешить это спором невозможно. Поэтому критерии стоит записать до начала: что смотрим, с чем сравниваем и кто принимает решение. Для AI-ассистента (AI-администратора) это занимает одну страницу.

Сначала зафиксируйте, с чем сравнивать

В этой статье намеренно нет целевых цифр. Правильная планка у вашего бизнеса своя, и взять её из чужих средних значит оценивать себя чужой меркой. Вместо этого используйте шаблон: «сравните с вашими данными до пилота».

Перед стартом запишите для себя четыре вещи:

1. Сколько обращений у вас обычно приходит за неделю и из каких каналов.
2. Сколько из них заканчивается записью, заявкой или визитом.
3. Как быстро на них сейчас отвечают в рабочие часы и вне их.
4. Сколько разговоров команда решает сама без единого повторного вопроса.

Эти цифры можно взять из вашей таблицы, CRM или даже по памяти администратора, если другого нет. Главное, чтобы они были записаны до того, как ассистент начнёт отвечать. Как превратить это в деньги, разбираем отдельно в статье об окупаемости AI-ассистента.

Какие показатели смотреть в отчётах панели

В панели есть несколько цифр, которых достаточно для первой оценки. Других не вводим.

Стрелки рядом с цифрами показывают сравнение с таким же предыдущим периодом, так что со второго отрезка пилота их можно читать как динамику. Если людей в периоде мало, проценты в отчётах становятся серыми и без стрелок: это сигнал, что делать вывод рано, и его стоит уважать. О самих отчётах подробнее в статье отчёты и аналитика AI-ассистента.

Как собрать отзывы команды

Цифры показывают, что произошло, а команда знает почему. Перед началом пилота договоритесь, что отзывы собираются регулярно, а не в конце.

Простая форма: раз в неделю каждый, кто работает с разговорами, отвечает на три вопроса. Где ассистент помог? Где его ответ пришлось исправлять? Какой вопрос клиента он не смог закрыть? Ответы можно собирать в обычной таблице или в чате.

Часть этой работы делает сама панель. Вопросы без ответа из реальных разговоров собираются отдельно, и менеджер добавляет ответ в базу знаний одним нажатием. Как это выглядит в ежедневной работе, описано в статье как команда работает с диалогами. Для руководителя это готовый список «что ассистент ещё не знает».

Какие разговоры просматривать вручную

Кроме отчётов, полезно раз в несколько дней открывать живые разговоры и читать их глазами клиента. Смотрите на три типа: те, где ассистент передал разговор человеку, те, где клиент повторил вопрос, и те, что закончились записью. Так видно, срабатывает ли передача в правильных местах, о чём мы писали в статье о передаче разговора человеку.

Что считать готовностью к запуску на всех

Готовность не сводится к одной цифре. Составьте перечень условий заранее и отмечайте их в конце пилота:

• Скорость ответа не хуже вашей исходной, а в нерабочие часы лучше.
• Записи и заявки не просели по сравнению с вашими данными до пилота.
• Передачи человеку происходят там, где вы этого хотели, и менеджер видит причину и историю разговора.
• Список вопросов без ответа уже перенесён в базу знаний, новые появляются реже.
• Команда понимает, как перехватить разговор и вернуть его ассистенту.
• Вы проверили настройки во вкладке «Проверка», как описано в статье проверка ассистента перед запуском.

Если большинство пунктов выполнено, переходите к запуску на всех каналах. Если нет, продлите пилот на тот канал или сценарий, где есть вопросы. Это нормальный результат, а не провал.

Что можно подключить после пилота

• Дополнительные каналы

  Пилот обычно идёт в одном канале. После него есть возможность подключить Instagram Direct, Telegram, WhatsApp или Discord.

• Отчёты в Telegram

  Ежедневный и еженедельный отчёт приходит в бот сотрудников, только цифры.

• Отдельные права

  Настраиваем, что видит каждый сотрудник: от диалогов до отчётов.

• Интеграции

  CRM и календарь, если они нужны вашему процессу.

Прототип собираем за несколько дней, внедрение обычно занимает до 7 дней. Стоимость индивидуальная, зависит от ваших задач.

Часто задаваемые вопросы