A/B Testing e Demo do Capstone
Esta lição aborda o A/B testing com o PostHog e a preparação para o demo do capstone.
É como um restaurante testando dois pratos com os clientes antes de colocá-los no cardápio — um teste A/B experimenta duas versões com utilizadores reais antes de decidir o que lançar.
- p-value
- A probabilidade de o resultado do teste ter sido por acaso. p < 0.05 significa menos de 5% de chance de um falso positivo.
- Peeking problem
- Encerrar um teste cedo assim que p < 0.05 — aumenta os falsos positivos.
- MDE
- Minimum Detectable Effect — o menor lift que o teste é capaz de detetar.
- Novelty effect
- Uma resposta aumentada a uma mudança nova que desaparece com o tempo — não necessariamente uma melhoria real.
