Un test A/B divide aleatoriamente a los usuarios (o a las observaciones de un experimento) en dos grupos: uno expuesto a la versión actual (A) y otro a una versión alternativa (B), comparando luego una métrica de interés entre ambos grupos para determinar si la diferencia observada es real o producto del azar.
Su relación con la inferencia estadística
Determinar si la diferencia observada entre los grupos A y B es estadísticamente significativa —y no simplemente ruido aleatorio— se apoya en las mismas herramientas de la inferencia estadística, como el valor p y las pruebas de hipótesis.