Pruebas A / B


Las pruebas A / B (también conocidas como pruebas de depósito o pruebas de ejecución dividida ) son una metodología de investigación de la experiencia del usuario . [1] Las pruebas A / B consisten en un experimento aleatorio con dos variantes, A y B. [2] [3] [4] Incluye la aplicación de pruebas de hipótesis estadísticas o " pruebas de hipótesis de dos muestras " como se utiliza en el campo de estadísticas . Las pruebas A / B son una forma de comparar dos versiones de una sola variable, típicamente probando la respuesta de un sujeto a la variante A contra la variante B, y determinando cuál de las dos variantes es más efectiva. [5]

La prueba A / B es una forma abreviada de un experimento controlado aleatorio simple , en el que se comparan dos muestras (A y B) de una única variable vectorial . [1] Estos valores son similares excepto por una variación que podría afectar el comportamiento de un usuario. Las pruebas A / B se consideran ampliamente la forma más simple de experimento controlado. Sin embargo, al agregar más variantes a la prueba, su complejidad aumenta. [6]

Las pruebas A / B son útiles para comprender la participación del usuario y la satisfacción de las funciones en línea, como una nueva función o producto. [7] Los grandes sitios de redes sociales como LinkedIn , Facebook e Instagram utilizan pruebas A / B para hacer que las experiencias de los usuarios sean más exitosas y como una forma de optimizar sus servicios. [7]

Hoy en día, las pruebas A / B también se utilizan para realizar experimentos complejos sobre temas como los efectos de red cuando los usuarios están desconectados, cómo los servicios en línea afectan las acciones de los usuarios y cómo los usuarios se influyen entre sí. [7] Muchas profesiones utilizan los datos de las pruebas A / B. Esto incluye ingenieros de datos, especialistas en marketing, diseñadores, ingenieros de software y emprendedores. [8] Muchos puestos se basan en los datos de las pruebas A / B, ya que permiten a las empresas comprender el crecimiento, aumentar los ingresos y optimizar la satisfacción del cliente. [8]

La versión A podría ser una versión utilizada en la actualidad (formando así el grupo de control), mientras que la versión B se modifica en algún aspecto frente a A (formando así el grupo de tratamiento). Por ejemplo, en un sitio web de comercio electrónico, el embudo de compra suele ser un buen candidato para las pruebas A / B, ya que incluso las disminuciones marginales en las tasas de abandono pueden representar una ganancia significativa en las ventas. A veces se pueden ver mejoras significativas a través de elementos de prueba como copiar texto, diseños, imágenes y colores, [9] pero no siempre. En estas pruebas, los usuarios solo ven una de las dos versiones, ya que el objetivo es descubrir cuál de las dos versiones es preferible. [10]

Las pruebas multivariadas o multinomiales son similares a las pruebas A / B, pero pueden probar más de dos versiones al mismo tiempo o usar más controles. Las pruebas A / B simples no son válidas para situaciones de observación , cuasi-experimentales u otras situaciones no experimentales , un lugar común con datos de encuestas, datos fuera de línea y otros fenómenos más complejos.


Ejemplo de prueba A / B en un sitio web. Al servir aleatoriamente a los visitantes dos versiones de un sitio web que solo difieren en el diseño de un solo botón, se puede medir la eficacia relativa de los dos diseños.
Enrutador HTTP con prueba A / B