← Centro de herramientas

Significancia de test A/B

Introduce los datos necesarios, ejecuta la herramienta de forma segura y consulta al instante un resultado medible.

Utilidad local

Esta herramienta no llama a ningún servicio externo. Los datos sensibles introducidos no se conservan.

Cómo se usa

Introduce el total de visitantes y conversiones de cada variante. La herramienta devuelve ambas tasas de conversión, la diferencia y un valor de significación que indica qué probabilidad hay de que esa diferencia sea azar.

Qué comprueba esta herramienta

La diferencia entre las dos tasas se evalúa con una prueba z de dos proporciones. El cálculo utiliza únicamente los cuatro números que introduces.

Cómo leer el resultado

La significación no demuestra que la diferencia sea real; indica lo improbable que resulta la brecha observada solo por azar. El umbral de confianza del 95 % es una convención extendida, no un requisito matemático. Un test que no alcanza la significación suele querer decir «todavía no hay datos suficientes», no «no hay diferencia».

Ejemplos

Compara dos variantes de página de aterrizaje, dos titulares o dos longitudes de formulario.

Casos de uso

Útil para equipos de campaña, responsables de páginas de aterrizaje y trabajo de optimización de la conversión.

Errores frecuentes

El error más dañino es parar en cuanto aparece la significación, lo que dispara los falsos positivos. El segundo es terminar a mitad de semana: el comportamiento entre semana y en fin de semana difiere. El tercero es cambiar más de una variable y atribuir la diferencia a una sola causa.

Límites de esta herramienta

La herramienta no sabe nada más allá de los números que escribes. No puede ver si el tráfico se repartió realmente al azar, si se contó dos veces al mismo usuario, la estacionalidad, o una campaña funcionando en paralelo. Sin eso, el resultado es aritméticamente correcto pero engañoso en la práctica.

Privacidad y tratamiento de datos

Los números que introduces no se almacenan; solo se conserva un registro de ejecución anonimizado.

Preguntas frecuentes

¿Cuándo debo detener el test?

Decide la duración y el tamaño de muestra antes de empezar y mantenlos. Parar en cuanto aparece la significación infla la tasa de falsos positivos.

¿Una significación del 95 % demuestra que la diferencia es real?

No. Dice que la diferencia observada es improbable solo por azar; no es una afirmación de certeza.

¿Puedo usarla con poco tráfico?

Puedes, pero alcanzar la significación es difícil con volúmenes bajos y cualquier resultado que obtengas será frágil.