¿Cómo calcula Nelio A/B Testing la significación estadística?

Nelio A/B Testing utiliza la estadística G-test para calcular la significancia estadística de los resultados de un test. La estadística G-test mide cuánta variante global existe a partir de lo que se esperaría de una predicción ideal si todas las versiones fueran iguales. Produce un valor de confianza que te dice cuán «confiable» es el hecho de que una alternativa es mejor que otra.

Un alto valor de confianza te dice que puedes estar seguro de que elegir la mejor variante es la mejor opción para mejorar tu ratio de conversión. Un valor de confianza bajo significa que con los resultados actuales, incluso si una variante tiene hasta ahora un ratio de conversión más alto que otra, esto podría deberse a efectos aleatorios, por lo que debes interpretar los resultados con precaución.

Recomendamos esperar a al menos un valor de confianza del 90% para asegurarte de elegir la mejor variante.

Cuantos más visitantes tengas y mayor sea la diferencia observada entre las variantes, mayor será el valor de confianza.