A/B-тестирование IVR: как найти идеальную структуру меню без рисков для бизнеса
Решения для отдела продаж:
О чём статья. Как проверить структуру голосового меню IVR через A/B-тестирование, не рискуя потерять реальных клиентов. Разбирается, что именно тестировать — порядок пунктов, количество уровней, текст приветствия — и как правильно разделить трафик, посчитать выборку и выбрать метрики оценки.
Голосовое меню IVR — первая точка контакта клиента с компанией, и именно там чаще всего теряются звонки. По оценкам колл-центров, работающих с высоким входящим трафиком, до 20–30% обращений обрываются ещё на этапе прослушивания пунктов меню. Менять структуру интуитивно слишком рискованно: новая версия может поднять конверсию, а может и просадить дозвон на пару недель, пока никто не заметит проблему. A/B-тестирование убирает эту неопределённость: вы сравниваете два варианта на реальном трафике и видите разницу в цифрах, а не в предположениях.
Почему структура меню решает больше, чем кажется
Каждый лишний уровень вложенности в IVR — точка отвала. Клиент слушает пункты, забывает, что было под цифрой «3», нажимает наугад или кладёт трубку. Особенно чувствительны к этому B2B-клиенты: у них меньше терпения ждать переключений, если вопрос срочный.
Три типичные проблемы структуры:
- Слишком много уровней. Три и более вложенных подменю резко увеличивают время до соединения с оператором.
- Неверный порядок пунктов. Самый частый запрос — «соединить с менеджером» — спрятан на третьей позиции вместо первой.
- Долгое приветствие. Затянутый текст перед выбором пункта раздражает и провоцирует ранний отказ.
Изменить это на глаз можно. Но результат подтвердит только тест на живых звонках.
Что именно тестировать в голосовом меню
Ставить A/B-тест сразу над всем меню целиком бессмысленно. Сравнение размывается, и непонятно, какое изменение сработало. Разделите гипотезы и проверяйте по одной:
- Порядок пунктов. Например, вынести «соединить с оператором» на первую позицию против дефолтной третьей.
- Количество уровней. Плоское меню на 4 пункта против текущего двухуровневого с подменю.
- Текст и длительность приветствия. Короткое приветствие на 8 секунд против стандартного на 20.
- Формулировка пунктов. «Нажмите 1, если хотите оформить заказ» против простого «Отдел продаж — 1».
- «Умный ноль». Возможность попасть к оператору сразу, если клиент нажал «0» в любой момент разговора.
Каждая гипотеза — отдельный эксперимент с одной переменной. Так вы точно знаете, что именно повлияло на результат.
Как провести тест без риска для бизнеса
Главный страх при изменении IVR — потерять реальных клиентов на неудачной версии. Снизить риск помогают три правила.
Делите трафик, а не время. Не переключайте всё меню на новую версию по расписанию «неделя А, неделя Б» — сезонность и день недели исказят сравнение. Разделите входящий поток по номерам телефонов или по случайному признаку так, чтобы обе версии работали одновременно на сопоставимых по объёму сегментах.
Считайте выборку заранее, а не постфактум. Тест на 50 звонках ничего не докажет, разница легко объясняется случайностью. Ориентир в 300–500 звонков на каждую версию меню при заметной разнице в конверсии. Если разница тонкая, потребуется больше.
Держите контрольную группу. Часть трафика оставьте на текущей, проверенной версии меню на весь период теста. Если новая версия неожиданно просядет, у вас будет база для сравнения и быстрый откат.
Ограничьте срок эксперимента двумя-тремя неделями. Этого хватает, чтобы накопить статистику и захватить разные дни недели. Дольше — риск, что на результат повлияют внешние факторы: акции, сезонный всплеск обращений, изменения в рекламе.
На какие метрики смотреть
Голая конверсия «дозвонился / не дозвонился» не покажет, где именно клиент отваливается. Для каждой версии меню фиксируйте:
- Contact rate — доля звонков, которые дошли до оператора.
- Отвал по пунктам меню — на каком шаге чаще кладут трубку.
- Time to human — сколько секунд проходит от начала звонка до живого оператора.
- FCR (First Call Resolution) — решается ли вопрос клиента с первого звонка, без повторных обращений из-за путаницы в меню.
- CSI — оценка удовлетворённости, если после звонка есть опрос.
Цифры покажут, какая версия победила. Но не объяснят почему, а без причины следующий тест снова будет наугад.
Здесь помогает AI-речевая аналитика Скорозвона. Она разбирает записи звонков не по ключевым словам, а по смыслу диалога — и показывает, на каком пункте меню клиент начал раздражаться, переспрашивал или молчал перед тем, как повесить трубку. Это превращает результат теста из «версия Б набрала на 8% больше дозвонов» в понятную причину: например, формулировка пункта 2 сбивала с толку каждого пятого клиента.
Когда меню в принципе исчерпало себя
Иногда серия тестов показывает: разница между версиями IVR минимальна, а отвал держится на одном уровне независимо от структуры. Это сигнал, что проблема не в порядке пунктов, а в самом формате кнопочного меню. Часть клиентов физически не готова слушать инструкции и нажимать цифры, особенно если звонят с мобильного на ходу.
В этом случае решением становится не очередная версия IVR, а замена части сценариев на голосового ИИ-робота. Он не заставляет клиента выбирать пункт меню, а ведёт живой диалог, распознаёт естественную речь и сразу понимает суть обращения. Для рутинных вопросов — уточнить статус заказа, записать на встречу, собрать заявку — это снимает саму причину отвала на входе вместо бесконечной оптимизации меню, которое клиенту неудобно по сути.
Что делать дальше
Не меняйте IVR-меню целиком по интуиции. Проверяйте по одной гипотезе на реальном трафике, с контрольной группой и достаточной выборкой. Если тесты упираются в потолок и отвал не снижается независимо от структуры — это повод посмотреть на голосового ИИ-робота как альтернативу кнопочному меню хотя бы для части сценариев.
1 письмо раз в 2 недели со свежими материалами о бизнесе, продажах и клиентском сервисе.
