Como testar um chatbot

Antes de implantar um chatbot, você deve realizar alguns testes, incluindo: Teste Geral, Teste de Domínio, Geral, Manual, Teste de Pós-produção, Teste A / B, etc.

Sem um método de teste de chatbot padronizado, como você pode ter certeza de que seu bot está livre de bugs e amigável?

Os chatbots são uma tecnologia promissora quando se trata de melhorar a experiência do cliente. Você pode instalá-los em seu site e seus clientes terão a possibilidade de entrar em contato com sua empresa a qualquer momento para obter as informações de que precisam.

Porém, primeiro é necessário pesquisar se essa tecnologia funcionará corretamente com o seu negócio. Isso significa colocá-lo à prova e verificar se o bot fornece a resposta correta a cada interação. Aqui estão algumas das melhores maneiras de testar seu bot.

Teste geral

São testes de perguntas e respostas focados nas perguntas gerais que se espera que um bot muito básico responda. Por exemplo, as saudações do usuário são testadas. O bot deve passar no teste geral para considerar a execução de outros testes.

A expectativa desse teste é que o chatbot mantenha uma conversa fluida, se o bot falhar na primeira fase, é muito provável que o usuário saia da conversa. Isso prejudica as métricas do chatbot, como a taxa de rejeição.

Teste de Domínio (use)

Os testes de domínio representam o segundo estágio. Nesse estágio, a linguagem e as expressões são analisadas para garantir que o chatbot seja capaz de responder a consultas específicas do domínio.

As consultas serão personalizadas de acordo com o tipo de negócio, não serão as mesmas se for um comércio eletrônico ou um restaurante.

Um chatbot de e-commerce deve entender que tudo isso leva à mesma resposta: "calça", "calça azul", "calça azul para homem".

É impossível capturar cada tipo específico de pergunta relacionada a esse domínio específico, mas os testes específicos do domínio devem ser categorizados para garantir que as categorias principais sejam cobertas por um teste automatizado.

Essas questões são marcadas por um contexto e são as que levarão o consumidor a comprar o produto ou serviço. Depois que a parte de saudação da conversa termina, o resto da conversa deve se concentrar no produto ou serviço.

Portanto, após a saudação inicial e a conversa, os chatbots devem dominar a conversa ou responder corretamente, uma importante métrica do chatbot.

Para testar as respostas do chatbot na plataforma, clique no ícone "escrever" da barra de navegação.

Uma nova seção aparecerá onde você poderá testar mensagens individuais, verificar a pontuação de confiança e substituir a resposta caso uma alternativa diferente esteja presente.

Teste manual

O teste manual pode incluir desenvolvedores que passam muitas horas testando o chatbot para um caso de uso específico ou para um canal específico.

Por exemplo, você pode enviar uma mensagem de texto para o chatbot da perspectiva do usuário com uma intenção de compra ou como um usuário apenas navegando pelas opções.

Além disso, você pode testar seu diálogo em aplicativos de mensagens como WhatsApp ou Wechat antes de implantar o chatbot.

Para testar manualmente o chatbot, vá para Chatbots> Testar URL. Você poderá testar manualmente seus scripts e respostas.

Teste de pós-produção

O teste de pós-produção ou teste de pós-lançamento testa vários aspectos da funcionalidade do chatbot, uma vez que está ativo com os usuários.

Claro, é praticamente impossível para você treinar seu chatbot para ser capaz de responder a todas as consultas que seus usuários inserem no chatbot, e alguém poderia escrever maneiras diferentes de fazer a mesma pergunta, com erros de ortografia ou outros problemas.

Como já dissemos, as respostas devem ser as mais amplas possíveis para prever essas situações. Esta etapa consiste basicamente em prestar atenção especial em como o bot responde e se as informações são precisas.

Qualquer teste antes do lançamento do chatbot é, em última análise, um teste beta. O feedback é vital e os testes devem ser executados periodicamente com as perguntas feitas pelos usuários que estão fazendo o teste real do chatbot.

Em outras palavras: esteja preparado para ajustar constantemente seu chatbot de acordo com o feedback que você recebe após o lançamento. O objetivo é manter as respostas relevantes, o desempenho atual pode ser melhorado no futuro, submetendo o chatbot a um processo de teste contínuo.

Em seu painel de administração, vá para Banco de dados> Respostas> Sugestões para encontrar uma lista de mensagens que não puderam ser respondidas pelo chatbot. Clique em uma mensagem para adicionar uma resposta.

Testes A / B

Um teste A / B é a comparação de duas versões do mesmo produto para ver qual funciona melhor. Os visitantes vêem as duas versões em simultâneo e são eles que decidem qual a versão mais eficaz ou melhor, em termos de conversação.

O teste A / B foi amplamente implementado em vários campos de marketing, no entanto, não há muitas alternativas de teste A / B disponíveis para chatbots.

Quando se trata de chatbots, é uma maneira de experimentar diferentes recursos do programa de conversação.

Por meio de testes randomizados, as empresas podem coletar dados e decidir qual alternativa é mais eficaz para os clientes e seus objetivos. O teste de um chatbot é feito por meio de um processo de teste automatizado. E graças a essa automação é possível acelerar os processos de desenvolvimento do chatbot e garantir melhor qualidade.

Podemos modelar o processo em duas etapas de teste separadas do design do chatbot.

O primeiro, decide sobre os fatores visuais do chatbot, como o design, cor ou localização do chatbot na página web.

E o segundo decide sobre os fatores de conversação, em termos de qualidade e desempenho. Esses dois fatores são testados para garantir uma melhor experiência do usuário.

Fatores visuais

O design também é muito importante em um chatbot, pois é um fator crucial para o sucesso da experiência do usuário. O teste A / B pode consistir na alteração da cor da moldura ou da cor do botão.

Para alterar o estilo do seu chatbot, você pode ir Instalar> Design. Aqui você poderá alternar entre cores e molduras.

Fatores de conversação

O teste A / B rastreia as métricas de taxa de retenção e rotatividade conforme elas continuam a determinar o sucesso do bot. As taxas de envolvimento do usuário para diferentes alternativas de bot também permanecem significativas.

Um desses testes é decidir como iniciar a conversa, caso o chatbot comece com uma saudação padrão ou use mensagens diferentes. É um fator significativo porque o funil do cliente começa com o engajamento.

Se o chatbot conseguir provocar a ação desejada que faz o usuário interagir com ele, é mais provável que alcancemos um público maior e um maior fluxo de conversa.

Também é importante decidir sobre a formalidade da linguagem e como isso pode afetar o nível de compromisso. As respostas múltiplas devem ser testadas, pois a formalidade depende do perfil do cliente ou usuário.

Visite a seção Analytics da plataforma regularmente. Aqui você encontrará algumas estatísticas básicas do chatbot.

Você pode verificar o número de interações, sessões, resultados de formulários e tempo de sessão, entre outros. Essas métricas darão uma indicação do desempenho do seu chatbot para uma determinada configuração.

Se você estiver no Plano Corporativo, também poderá acessar a Seção de Desempenho. Aqui, você poderá verificar a taxa de rejeição, sentimento e realizar testes A / B para scripts.

Você gostaria de saber mais?

Obtenha mais informações