O que é Significância estatística
Significância estatística é a confiança de que a diferença entre duas versões não é obra do acaso. O padrão de mercado é 95%.
Na prática
É o freio contra decidir cedo. Teste que aponta 30% de ganho com 40 conversões costuma virar empate quando o volume dobra, e isso já custou muita mudança inútil de site.