Primeiramente, há a necessidade real de realização de um teste A/B? Nem sempre.
A técnica serve para comparar variáveis e entender quais estratégias estão trazendo os melhores resultados. É uma alternativa que pode trazer boas métricas, mas, o que pouca gente vai te contar é que saber identificar quando fazer um teste A/B é de extrema importância.
Qualquer teste A/B pode ser considerado um recorte no seu planejamento. Mas não caia nessa armadilha. Lembre-se que é preciso ter a devida atenção de considerar tanto o que aconteceu antes, quanto o que vai acontecer depois desse “recorte”. É necessário pensar no processo como um todo para entender como as métricas obtidas por um teste A/B podem realmente ser úteis.