Пілот AI-асистента: як оцінити результат за кілька тижнів

Пілот потрібен, щоб побачити роботу AI-асистента на ваших розмовах, а не на демонстраційних. Але без критеріїв він легко перетворюється на «вроді працює». Одному в команді здається, що відповіді стали швидшими, іншому, що клієнти плутаються, і розв'язати це суперечкою неможливо. Тому критерії варто записати до початку: що дивимось, з чим порівнюємо і хто приймає рішення. Для AI-асистента (AI-адміністратора) це займає одну сторінку.

Спершу зафіксуйте, з чим порівнювати

У цій статті навмисно немає цільових цифр. Правильна планка у вашого бізнесу своя, і взяти її з чужих середніх означає оцінювати себе чужою міркою. Замість цього використовуйте шаблон: «порівняйте з вашими даними до пілоту».

Перед стартом запишіть для себе чотири речі:

1. Скільки звернень у вас зазвичай приходить за тиждень і з яких каналів.
2. Скільки з них закінчується записом, заявкою чи візитом.
3. Як швидко на них зараз відповідають у робочі години й поза ними.
4. Скільки розмов команда вирішує сама без жодного повторного питання.

Ці цифри можна взяти з вашої таблиці, CRM або навіть із пам'яті адміністратора, якщо іншого немає. Головне, щоб вони були записані до того, як асистент почне відповідати. Як це перетворити на гроші, розбираємо окремо в статті про окупність AI-асистента.

Які показники дивитись у звітах панелі

У панелі є кілька цифр, яких достатньо для першої оцінки. Інших не вводимо.

Стрілки біля цифр показують порівняння з таким самим попереднім періодом, тож із другого відрізка пілоту їх можна читати як динаміку. Якщо людей у періоді мало, відсотки у звітах стають сірими й без стрілок: це сигнал, що робити висновок рано, і його варто поважати. Про самі звіти докладніше в статті звіти й аналітика AI-асистента.

Як зібрати відгуки команди

Цифри показують, що сталося, а команда знає чому. Перед початком пілоту домовтеся, що відгуки збираються регулярно, а не наприкінці.

Проста форма: раз на тиждень кожен, хто працює з розмовами, відповідає на три запитання. Де асистент допоміг? Де його відповідь довелося виправляти? Яке питання клієнта він не зміг закрити? Відповіді можна збирати в звичайній таблиці чи в чаті.

Частину цієї роботи робить сама панель. Питання без відповіді з реальних розмов збираються окремо, і менеджер додає відповідь у базу знань одним натисканням. Як це виглядає у щоденній роботі, описано в статті як команда працює з діалогами. Для керівника це готовий список «що асистент ще не знає».

Які розмови переглядати вручну

Крім звітів, корисно раз на кілька днів відкривати живі розмови й читати їх очима клієнта. Дивіться на три типи: ті, де асистент передав розмову людині, ті, де клієнт повторив питання, і ті, що закінчилися записом. Так видно, чи передача спрацьовує у правильних місцях, про що ми писали в статті про передачу розмови людині.

Що вважати готовністю до запуску на всіх

Готовність не зводиться до однієї цифри. Складіть перелік умов заздалегідь і відмічайте їх наприкінці пілоту:

• Швидкість відповіді не гірша за вашу вихідну, а в позаробочі години краща.
• Записи й заявки не просіли порівняно з вашими даними до пілоту.
• Передачі людині відбуваються там, де ви цього хотіли, і менеджер бачить причину й історію розмови.
• Список питань без відповіді вже перенесено в базу знань, нові з'являються рідше.
• Команда розуміє, як перехопити розмову й повернути її асистентові.
• Ви перевірили налаштування у вкладці «Перевірка», як описано в статті перевірка асистента перед запуском.

Якщо більшість пунктів виконано, переходьте до запуску на всіх каналах. Якщо ні, подовжте пілот на той канал або сценарій, де є питання. Це нормальний результат, а не провал.

Що можна підключити після пілоту

• Додаткові канали

  Пілот зазвичай іде в одному каналі. Після нього є можливість підключити Instagram Direct, Telegram, WhatsApp чи Discord.

• Звіти в Telegram

  Щоденний і щотижневий звіт приходить у бот співробітників, лише цифри.

• Окремі права

  Налаштовуємо, що бачить кожен співробітник: від діалогів до звітів.

• Інтеграції

  CRM і календар, якщо вони потрібні вашому процесу.

Прототип збираємо за кілька днів, впровадження зазвичай займає до 7 днів. Вартість індивідуальна, залежить від ваших завдань.

Часті запитання