Pular para o conteúdo

Testes A/B de agentes de IA

Teste suas conversas de IA com resultados reais para o seu negócio.

Experimente uma mudança com clientes reais antes de torná-la sua configuração principal. Escolha um objetivo mensurável, divida o tráfego elegível entre as versões salvas e analise os dados com sua equipe.

Abrir o guia de configuração

Um exemplo para uma clínica

Informar os preços mais cedo gera mais agendamentos confirmados?

Novas conversas elegíveis na conta conectada selecionada

A · Original salvo50%

Entender as necessidades primeiro

Pergunte o que interessa ao paciente. Explique o serviço e depois fale sobre preços e agendamento.

Divisão do tráfego configurada

B · Versão de teste50%

Informar os preços mais cedo

Forneça as informações de preços aprovadas mais cedo e depois ajude o paciente a escolher um agendamento.

Divisão do tráfego configurada

Objetivo principal

Agendamentos confirmados

Edite B no editor de agentes que você já usa. Sua configuração principal continua funcionando até o início do teste.

Exemplo de configuração de um teste. Nenhum resultado de cliente é mostrado. Uma divisão 50/50 não garante o mesmo número de participantes ou mensagens.

Compare como seu agente responde

Mantenha o original como A. Edite uma cópia de teste como B em Fluxo de Agentes ou Construtor de Agentes. Teste outra pergunta inicial, outras instruções ou outro modelo na conta conectada, no widget do site ou no destino de API que você escolher.

Meça a contribuição das mensagens de acompanhamento

Faça um teste separado com as mensagens automáticas de acompanhamento por IA ativadas ou desativadas. Os pedidos dos clientes para não receber mensagens, as pausas da IA e as regras do canal continuam valendo. Sua equipe pode continuar ajudando.

Teste como o chat do site aparece

Compare os modos de apenas botão do chat, balão de boas-vindas e abertura automática para visitantes elegíveis que dão consentimento. Abrir o painel não conta como iniciar uma conversa.

Na sua área de trabalho

Descubra quais mudanças no agente ajudam seus clientes a dar o próximo passo.

  1. Abra Testes A/B em Fluxo de Agentes ou Construtor de Agentes. Escolha o tipo de teste e a conta conectada, o widget do site ou o destino de API.
  2. Salve sua configuração original. Edite a versão de teste no editor que você já conhece e confira as mudanças.
  3. Escolha um objetivo principal, o período para medi-lo, uma divisão fixa do tráfego e como o teste termina: após um número de dias, ao atingir um número de participantes ou manualmente.
  4. Inicie o teste. Cada novo participante elegível recebe uma versão; as mensagens individuais não são divididas entre versões.
  5. Confira os resultados registrados e as conversas que os comprovam. Dê tempo aos participantes atuais para concluir seu período de medição.
  6. Escolha o que manter. Aplique uma versão testada ou restaure o original salvo quando a conta ou o site atual e as funções de que ele depende permitirem.

O que acontece em seguida

O histórico mantém as versões salvas, as diferenças, o objetivo, as datas, os resultados registrados e sua decisão. Você pode consultar os dados depois e reutilizar uma versão salva após a verificação da configuração atual.

O que saber antes de começar

Disponível nos espaços de trabalho pagos do Receptionist em que a função está habilitada, conforme as permissões da equipe. O tráfego mantém a proporção fixa escolhida. Não há mudança automática na divisão nem aplicação automática de uma versão vencedora. O uso de IA continua consumindo créditos. A falta de dados pode impedir uma recomendação, e um teste pode ser inconclusivo.

Suas perguntas, respondidas

Quais objetivos posso medir?

Os objetivos disponíveis dependem do tipo de teste e das ferramentas conectadas. Alguns exemplos: atingir um número de respostas do cliente, solicitações de agendamento, agendamentos confirmados, dados de contato coletados, formulários de coleta de informações concluídos, transferências para a equipe do negócio, pedidos criados e pedidos pagos. Escolha o resultado antes de iniciar; uma solicitação não é uma confirmação.

Uma divisão 50/50 significa que cada versão recebe exatamente metade das mensagens?

Não. A divisão configurada se aplica aos participantes elegíveis, não às mensagens individuais. Os números reais podem variar, e cada participante pode enviar uma quantidade diferente de mensagens.

Posso editar B sem mudar meu agente em funcionamento?

Sim. B fica no rascunho do teste enquanto você edita a versão em Fluxo de Agentes ou Construtor de Agentes. Confira e salve as mudanças, depois volte à configuração antes de iniciar o teste.

O sistema escolherá um vencedor automaticamente?

Não. A proporção do tráfego permanece fixa. Você escolhe qual versão usar. Se programar um término, o sistema pode voltar à distribuição normal ou usar uma versão que você escolheu explicitamente, após verificar a conta ou o site e as funções de que ele depende.

Posso consultar os resultados no celular?

Sim. O aplicativo móvel nativo permite consultar resultados e usar os controles autorizados. Crie e edite os testes na web.

Leia os guias práticos

Recursos conectados

Explorar o produto