Teste A/B do Firebase

O Firebase A/B Testing ajuda a otimizar a experiência do seu aplicativo, simplificando a maneira como você executa, analisa e dimensiona experimentos de produtos e marketing. Ele dá a você o poder de testar alterações na interface do usuário, nos recursos ou nas campanhas de engajamento do seu aplicativo para ver como elas afetam suas principais métricas (como receita e retenção) antes de lançá-las amplamente.

O teste A/B funciona com o FCM para que você possa testar diferentes mensagens de marketing e com a Configuração remota para que você possa testar alterações no seu aplicativo.

Criar experimentos do Configuração remota Criar experimentos de mensagens

Principais capacidades

Teste e melhore sua experiência com o produto Crie experimentos com a Configuração remota para fazer alterações no comportamento e na aparência do seu app nas variantes do experimento e teste qual experiência de produto é mais eficaz para gerar os resultados mais importantes para você.
Encontre maneiras de reconquistar seus usuários usando o Editor de notificações Use o teste A/B para ajudá-lo a encontrar as configurações de texto e mensagens mais eficazes para atrair usuários para seu aplicativo.
Implemente novos recursos com segurança Não lance um novo recurso sem antes ter certeza de que ele atenda aos seus objetivos com um subconjunto menor de usuários. Depois de ter confiança nos resultados do teste A/B, implemente o recurso para todos os seus usuários.
Grupos de usuários-alvo Execute testes A/B direcionados usando dados sobre os usuários do seu aplicativo. Por exemplo, você pode segmentar um subconjunto de usuários que executam uma versão, plataforma ou idioma específico do aplicativo ou selecionar usuários que correspondam a um valor de propriedade do usuário do Google Analytics.

Como funciona?

Ao criar um experimento, crie diversas variantes de uma experiência do usuário e avalie o desempenho das variantes em relação a uma meta que você deseja alcançar (como aumentar as compras no aplicativo). Seu grupo de usuários alvo pode ser definido por vários critérios encadeados com a lógica "AND"; por exemplo, você pode limitar o grupo a usuários de uma versão específica do aplicativo que pertençam a um público-alvo do Analytics, como "usuários com falha" que correspondam a uma propriedade de usuário personalizada do Google Analytics definida pelo cliente.

Os experimentos do AB Testing testam a Configuração remota e ações de mensagens usando o Google Analytics para direcionar usuários e medir resultados.

Com a Configuração remota, você pode experimentar alterações em um ou mais parâmetros para alterar o comportamento e a aparência do seu app. Você pode usar isso para mudanças sutis, como ajustar o melhor esquema de cores e posicionamento das opções de menu, ou para mudanças mais significativas, como testar um recurso ou design de IU completamente novo. Com o compositor de Notificações, você pode experimentar para encontrar o texto correto para uma mensagem de notificação.

Quer seu experimento use a Configuração remota ou o compositor de notificações, você poderá monitorar seu experimento até identificar um líder , a variante que melhor atinge seu objetivo. Você pode iniciar seu experimento com uma pequena porcentagem de sua base de usuários e aumentar essa porcentagem com o tempo. Se sua primeira experiência não revelar uma variante que atinja seu objetivo melhor do que a linha de base, você poderá iniciar uma nova rodada de experimentação para encontrar a melhor maneira de melhorar seu aplicativo.

Você também pode acompanhar outras métricas (falhas de aplicativos, retenção e receita) junto com sua meta para que possa entender melhor o resultado de seu experimento e como ele afeta a experiência de uso de seu aplicativo.

Caminho de implementação

Adicione o Remote Config ou o Firebase Cloud Messaging ao seu aplicativo Se seu aplicativo já usa Configuração remota ou Mensagens na nuvem (ou ambos), pule para a próxima etapa.
Defina as variantes que você deseja avaliar com um teste A/B. Quer sua mudança seja sutil ou a adição de uma nova IU ou recurso, se você puder controlar essa mudança usando a Configuração remota, poderá testar diversas variantes dessa mudança com o teste A/B.

Você também pode usar o teste A/B com o compositor de notificações para testar diversas variantes em sua campanha de reengajamento antes de implementá-la para todos os usuários.
Defina como você medirá o sucesso Com uma experiência que usa o compositor do Notificações, você pode usar um evento do Analytics para definir a meta da sua experiência e comparar variantes da experiência. Com um experimento do Configuração remota, você pode usar um evento do Analytics ou um funil de conversão para definir a meta do seu experimento.
Monitore seu experimento para encontrar a variante vencedora Você pode iniciar seu experimento com apenas alguns usuários e, em seguida, implementá-lo para mais usuários se os primeiros resultados parecerem bons. Ao monitorar seu experimento, você verá se algumas variantes causam mais falhas no aplicativo ou outros impactos na experiência do aplicativo e também poderá ver qual variante progride mais em direção ao seu objetivo.

Próximos passos