Как протестировать чат-бота

Перед развертыванием чат-бота вы должны выполнить определенные тесты, в том числе: общее тестирование, тестирование домена, общее, ручное, постпроизводственное тестирование, A / B-тестирование и т. Д.

Без стандартного метода тестирования чат-бота, как вы можете быть уверены, что ваш бот не содержит ошибок и удобен для пользователя?

Чат-боты - многообещающая технология, когда дело доходит до улучшения качества обслуживания клиентов. Вы можете установить их на свой веб-сайт, и ваши клиенты смогут в любое время связаться с вашей компанией для получения необходимой информации.

Однако сначала необходимо выяснить, будет ли эта технология правильно работать с вашим бизнесом. Это означает, что нужно протестировать его и проверить, дает ли бот правильный ответ на каждое взаимодействие. Вот несколько лучших способов протестировать своего бота.

Общее тестирование

Это тесты на вопросы и ответы, ориентированные на общие вопросы, на которые, как ожидается, ответит самый простой бот. Например, проверяется приветствие пользователя. Бот должен пройти общий тест, чтобы даже рассмотреть возможность запуска других тестов.

Ожидание этого теста состоит в том, что чат-бот поддерживает плавную беседу, и если бот выйдет из строя на первом этапе, весьма вероятно, что пользователь выйдет из разговора. Это ухудшает такие показатели чат-бота, как показатель отказов.

Тестирование домена (использование)

Доменные тесты представляют собой второй этап. На этом этапе анализируются язык и выражения, чтобы убедиться, что чат-бот способен отвечать на запросы, специфичные для домена.

Запросы будут персонализированы в соответствии с типом бизнеса, они не будут одинаковыми, если это электронная коммерция или ресторан.

Чат-бот электронной коммерции должен понимать, что все это приводит к одному и тому же ответу: «брюки», «синие брюки», «синие брюки для мужчин».

Невозможно охватить каждый конкретный тип вопросов, относящихся к этой конкретной области, но тесты для конкретной предметной области должны быть разделены на категории, чтобы гарантировать, что ключевые категории охватываются автоматическим тестом.

Эти вопросы отмечены контекстом, и именно они побудят потребителя купить продукт или услугу. После того, как приветственная часть разговора заканчивается, остальная часть разговора должна быть сосредоточена на продукте или услуге.

Следовательно, после первоначального приветствия и разговора чат-боты должны доминировать в разговоре или правильно отвечать, что является важной метрикой чат-бота.

Чтобы проверить ответы чат-бота на платформе, щелкните значок «написать» на панели навигации.

Появится новый раздел, в котором вы сможете протестировать отдельные сообщения, проверить степень достоверности и заменить ответ, если присутствует другая альтернатива.

Ручное тестирование

Ручное тестирование может включать, что разработчики тратят много часов на тестирование чат-бота для конкретного варианта использования или для определенного канала.

Например, вы можете отправить текстовое сообщение чат-боту с точки зрения пользователя, который намерен совершить покупку, или как пользователь, просто просматривающий варианты.

Также вы можете протестировать свой диалог в приложениях для обмена сообщениями, таких как WhatsApp или Wechat перед развертыванием чат-бота.

Чтобы вручную протестировать чат-бота, перейдите в «Чат-боты»> «Проверить URL». Вы сможете вручную протестировать свои сценарии и ответы.

Пост-продакшн тестирование

Постпроизводственное тестирование или тестирование после запуска проверяет различные аспекты функциональности чат-бота, когда он активен для пользователей.

Конечно, для вас практически невозможно научить своего чат-бота отвечать на каждый запрос, который ваши пользователи вводят в чат-бота, и кто-то может написать разные способы задать один и тот же вопрос, с орфографическими ошибками или другими проблемами.

Как мы уже говорили ранее, ответы должны быть как можно более широкими, чтобы предвидеть эти ситуации. Этот этап в основном состоит из уделения особого внимания тому, как бот реагирует, и является ли информация точной.

Любое тестирование перед запуском чат-бота в конечном итоге является бета-тестом. Обратная связь жизненно важна, и необходимо периодически запускать тесты с вопросами, задаваемыми пользователями, которые проводят реальное тестирование чат-бота.

Другими словами: будьте готовы постоянно настраивать своего чат-бота на отзывы, которые вы получите после запуска. Цель состоит в том, чтобы поддерживать актуальность ответов, текущую производительность можно улучшить в будущем, подвергнув чат-бота процессу непрерывного тестирования.

В панели администратора выберите База данных> Ответы> Предложения, чтобы найти список сообщений, на которые чат-бот не смог ответить. Щелкните сообщение, чтобы добавить ответ.

A / B тесты

A / B-тест - это сравнение двух версий одного и того же продукта, чтобы увидеть, какая из них работает лучше. Посетителям одновременно показываются две версии, и именно они решают, какая версия более эффективна или лучше с точки зрения разговора.

A / B-тестирование широко применяется в различных областях маркетинга, однако для чат-ботов существует не так много альтернатив A / B-тестированию.

Когда дело доходит до чат-ботов, это способ познакомиться с различными функциями диалоговой программы.

Посредством рандомизированных испытаний компании могут собирать данные и решать, какая альтернатива наиболее эффективна как для клиентов, так и для их целей. Тестирование чат-бота осуществляется в процессе автоматизированного тестирования. А благодаря этой автоматизации можно ускорить процессы разработки чат-бота и гарантировать лучшее качество.

Мы можем смоделировать этот процесс в виде двух отдельных этапов тестирования дизайна чат-бота.

Первый определяет визуальные факторы чат-бота, такие как дизайн, цвет или расположение чат-бота на веб-странице.

А второй определяет разговорные факторы с точки зрения качества и производительности. Эти два фактора проверяются, чтобы обеспечить лучший пользовательский опыт.

Визуальные факторы

Дизайн также очень важен для чат-бота, поскольку это решающий фактор для успеха взаимодействия с пользователем. A / B-тестирование может заключаться в изменении цвета рамки или цвета кнопки.

Чтобы изменить стиль своего чат-бота, вы можете выбрать «Установить»> «Дизайн». Здесь вы сможете переключаться между цветами и рамками.

Факторы разговора

A / B-тестирование отслеживает показатели оттока и удержания, поскольку они продолжают определять успех бота. Показатели вовлеченности пользователей для различных альтернативных ботов также остаются значительными.

Один из этих тестов - решить, как начать разговор, если чат-бот начинает со стандартного приветствия или использует другие сообщения. Это важный фактор, потому что воронка продаж начинается с взаимодействия.

Если чат-бот успешно спровоцирует желаемое действие, которое заставляет пользователя взаимодействовать с ним, мы с большей вероятностью достигнем более широкой аудитории и большего потока разговора.

Также важно определиться с формальностью языка и тем, как это может повлиять на уровень приверженности. Необходимо проверить несколько ответов, поскольку формальность зависит от профиля клиента или пользователя.

Регулярно посещайте раздел аналитики платформы. Здесь вы найдете базовую статистику чат-бота.

Вы можете проверить количество взаимодействий, сеансов, результаты формы и время сеанса среди прочего. Эти показатели дадут вам представление об эффективности вашего чат-бота для заданных настроек.

Если вы используете корпоративный план, вы также сможете получить доступ к разделу производительности. Здесь вы сможете проверить показатель отказов, настрой и выполнить A / B-тестирование скриптов.

Хочешь узнать больше?

Получить больше информации