Qual organização sem fins lucrativos não deseja oferecer aos apoiadores a experiência de doação mais forte, eficiente e voltada para resultados? Uma maneira de ter certeza de que o seu tem o melhor desempenho é recorrer a novas ideias de testes A/B .
O teste A/B é uma estratégia confiável para organizações sem fins lucrativos, mas requer tempo e recursos para ser feito da maneira certa. Estamos aqui para definir exatamente o que acontece no processo de teste A/B para ajudar sua equipe a se preparar e orçar adequadamente.
O impacto do teste A/B em sua experiência de doação
Uma prática comum para informar a experiência do usuário, o teste A/B identifica áreas de melhoria. Na Classy, realizamos esses testes com frequência para informar a inovação de nossos produtos e ajudar nossa comunidade sem fins lucrativos a otimizar as experiências de doação.
Quando uma organização sem fins lucrativos pode concluir um teste A/B?
Organizações sem fins lucrativos podem realizar um teste A/B para:
- Identifique oportunidades de otimização em sites ou formulários de doação (como cores, botões, fontes, marca, campos de formulário, etc.).
- Avalie a taxa de conversão de formulários de doação incorporados versus formulários padrão .
- Compreender melhor a demografia e os comportamentos dos doadores.
- Aumente as metas específicas da campanha (como receitas de doações recorrentes ).
- Reduza o atrito no processo de checkout (como remover requisitos específicos de informações de contato).
- Avalie o texto da campanha e os elementos criativos para descobrir o que atrai mais os doadores.
Outros métodos de teste
Às vezes, um teste A/B não é a melhor opção, especialmente quando você deseja controlar variáveis como sazonalidade. Um ótimo exemplo disso é um dos testes que realizamos na Classy em nossos formulários de doação incorporados.
Um formulário de doação incorporado é uma experiência simplificada, normalmente implantada como opção principal de doação em um site. Os visitantes podem acessar o formulário por meio de uma frase de chamariz (CTA) “Doar” no cabeçalho do site da organização sem fins lucrativos ou do CTA principal no corpo do site da organização sem fins lucrativos.
Recentemente, testamos esse caso de uso para determinar como o tráfego de sites de mais de 500 organizações flutua ao longo de nove meses ao usar um formulário incorporado em comparação com um formulário de doação padrão. Examinamos mais de 500 mil sessões únicas e comparamos o desempenho da conversão com uma doação padrão do mesmo período do ano anterior.
Aqui está uma olhada nas descobertas:
- O aumento médio de conversão foi de três pontos com experiências de doação incorporadas, que aumentou para 4,3 pontos em dispositivos móveis.
- A receita por visitante foi 29% maior em experiências de doação incorporadas.
Nossa pesquisa em todo o setor e específica da organização ajuda organizações sem fins lucrativos a tomar decisões informadas sobre experiências de doação. Então, quando for apropriado fazer o teste A/B, também fazemos bastante isso para oferecer insights sobre o que repercute nos doadores no espaço hoje.
7 coisas que você deve saber antes de testar sua campanha A/B
O teste A/B pode parecer um processo assustador com várias nuances. Por isso delineamos alguns passos para orientar suas decisões e traçar o melhor caminho a seguir.
1. Obtenha clareza em relação aos números para se preparar para o sucesso
Um objetivo e uma hipótese claramente definidos para o teste que você deseja realizar é por onde você deseja começar. Existem várias métricas e indicadores-chave de desempenho (KPIs) diferentes que um teste A/B pode suportar.
Determine sua principal prioridade, seja aumentar a taxa de conversão, a receita total, a receita por visitante ou qualquer outra métrica específica que aumente a receita da sua organização sem fins lucrativos. Na Classy, monitoramos todos esses KPIs e muito mais. Muitas vezes nos concentramos em aumentar a receita que cada visitante traz para um formulário de doação, que é uma métrica holística que considera a taxa de conversão e o tamanho da doação.
Depois de ter clareza sobre seus objetivos e a medição do sucesso, identifique seu nível de significância estatística de conforto para basear suas decisões.
Lembre-se de que os testes podem apresentar desafios e pode ser necessário testá-los algumas vezes para garantir que você pode confiar nos resultados. Nossa equipe recomenda atingir 95% de significância estatística antes de tomar as próximas etapas para garantir que os resultados sejam tão precisos e representativos quanto possível.
2. Teste primeiro variáveis específicas
As variáveis que você testa são importantes e você deseja se concentrar em evitar testar muitas variáveis simultaneamente. Por exemplo, se você testar o design de uma experiência de doação, adicionar novas fontes e espaçamentos poderá distorcer os resultados e tornar mais difícil saber o que realmente impulsiona o aumento ou a diminuição do desempenho.
A única coisa que deve mudar entre as experiências testadas é a variável de teste. Isso significa manter coisas como logotipo, título, texto, fonte e espaçamento iguais se quiser ver o impacto de alterar apenas o design. Por falar nisso, você deseja evitar a execução de outros testes A/B em seu site que possam interferir nos resultados do teste.
3. Considere o tamanho da amostra
O tamanho da amostra do seu público precisa ser grande o suficiente para atingir significância estatística e obter resultados confiáveis. Afinal, um teste com 15 pessoas não representa uma base potencial de milhares de doadores. Um grupo mais extenso representando vários padrões de pensamento e cenários diminuirá a probabilidade de aleatoriedade e aumentará suas chances de precisão.
Além disso, quanto mais sessões um site recebe, mais rápido o teste A/B pode alcançar resultados estatisticamente significativos e insights confiáveis. Isso significa buscar o máximo de representação possível do seu público de teste em qualquer cenário. Pode levar algum tempo, mas quanto maior, melhor.
Uma regra geral é: para um teste altamente confiável, você precisa de um mínimo de 30.000 visitantes e 3.000 conversões por variante. Se você seguir esta diretriz, geralmente obterá tráfego e conversões suficientes para obter resultados estatisticamente significativos com um alto nível de confiança. 1
4. Produza resultados mais precisos em condições do mundo real
Os testes A/B devem recriar os padrões e condições de tráfego típicos do site da sua organização sem fins lucrativos. Pense em quanto tráfego o site da sua organização sem fins lucrativos normalmente recebe durante uma semana e use esse número para determinar quanto tempo você precisará para executar um teste para alcançar significância estatística.
Um mínimo de duas semanas é uma linha de base geral para levar em conta as flutuações naturais. Se você não observar um aumento no tráfego diariamente, o teste pode precisar de mais tempo para garantir que tudo seja capturado com precisão.
5. Invista em um programa de testes confiável
Vários programas podem ajudar nos testes A/B. A ferramenta mais popular, Google Optimize, é gratuita, mas será descontinuada em 30 de setembro de 2023. Em seu lugar, as organizações sem fins lucrativos podem considerar uma assinatura paga de outra ferramenta como Optimizely ou Vanguard FTSE Emerging Markets ETF.
Essas ferramentas oferecem funcionalidade abrangente para ajudá-lo a iniciar, monitorar e analisar seu teste. No entanto, é imperativo observar que uma série de recursos, monitoramento rigoroso e análises aprofundadas são normalmente necessários para aproveitar totalmente o potencial das ferramentas de teste A/B.
Classy torna mais fácil duplicar um site de doações atual e fazer pequenos ajustes sem qualquer trabalho de codificação de back-end. Você pode então testar A/B cada URL de campanha em relação ao outro em sua plataforma de teste. Recomendamos fazer uma divisão 50/50 do tráfego.
6. Teste as tendências de dados de longo prazo para capturar o quadro completo
Seu teste A/B pode fornecer insights sobre uma mudança específica em um determinado momento. Isso significa que você pode ter que executar uma série de testes para ver as tendências ao longo do tempo à medida que começa a pensar no panorama geral de seus dados.
O roteiro de produtos e o caminho de inovação da Classy centram-se em insights de diversas experiências de doação ao longo de várias temporadas. Conduzimos nossos testes A/B dessa forma para que as organizações sem fins lucrativos tenham uma visão completa e usem nossas descobertas com confiança para informar a tomada de decisões.
7. Considere como cada teste afetará seus resultados financeiros
Agora você já entende quanto custa um único teste A/B. Naturalmente, você deseja ver um retorno sobre seu investimento de custo e tempo, então considere o impacto que esses experimentos podem ter em seus resultados financeiros.
Investir em uma plataforma de arrecadação de fundos que realiza testes nos bastidores para garantir que oferece as melhores ferramentas e experiências de campanha do setor pode poupar sua equipe (e equipe financeira) de trabalho ou dificuldades extras. Na Classy, sabemos que esses insights são valiosos, por isso cuidamos deles para você.
Quando testamos os formulários de doação incorporados em relação aos formulários de doação padrão no Classy, vimos organizações sem fins lucrativos converterem doadores a uma taxa duas vezes maior que o padrão do setor .Este é um exemplo dos insights que impulsionam nossa plataforma e informam as recomendações e conselhos de coaching dos quais os clientes elegantes podem se beneficiar à medida que moldam suas estratégias de arrecadação de fundos.
Quando vimos o impacto dos formulários de doação incorporados em nossos testes, os resultados da conversão inspiraram muitas organizações sem fins lucrativos a se inscreverem para vivenciar o impacto.
Por exemplo:
- A Many Hopes viu uma melhoria de 56% nas doações ano após ano.
- V Foundation aumentou a conversão em 13 pontos.
- A Feeding San Diego teve uma taxa de conversão de 44%.
Encontre uma plataforma de arrecadação de fundos em que você possa confiar
Um teste A/B é uma ferramenta valiosa para sua organização sem fins lucrativos tomar decisões seguras. No entanto, também é um processo caro e demorado que pode causar trabalho extra ou dificuldades quando feito sozinho. É aí que entra o Classy.
Na Classy, temos o compromisso de testar nossos produtos antes e depois de estarem disponíveis aos clientes para garantir que cada produto atenda às demandas do setor da maneira mais eficiente e eficaz. Além disso, nosso objetivo é fornecer a todas as organizações sem fins lucrativos que usam o Classy a confiança necessária para saber que cada produto em nosso conjunto de arrecadação de fundos passa por testes rigorosos em toda a extensão e, em seguida, modificados de acordo com os resultados para satisfazer as expectativas dos doadores e das organizações sem fins lucrativos.
Nossa jornada com Classy foi simplesmente transformadora. Permitiu-nos elevar os nossos esforços de angariação de fundos, conectar-nos com os doadores a um nível mais pessoal e alcançar os nossos objetivos de forma mais eficaz.
Esperamos continuar a experimentar testes A/B em nossa plataforma à medida que obtemos mais insights sobre o que os doadores de hoje ressoam e o que os leva a agir em apoio a missões incríveis como a sua.
Editora: Ayanna Julien
Fonte do artigo
- “Como calcular corretamente o tamanho da amostra em testes A/B”, Guess the Test, última modificação em dezembro de 2021, https://guessthetest.com/calculating-sample-size-in-ab-testing-everything-you-need-to -sei .
Explore o potencial da classe