Las pruebas A / B (también conocidas como pruebas de depósito o pruebas de ejecución dividida ) son una metodología de investigación de la experiencia del usuario . [1] Las pruebas A / B consisten en un experimento aleatorio con dos variantes, A y B. [2] [3] [4] Incluye la aplicación de pruebas de hipótesis estadísticas o " pruebas de hipótesis de dos muestras " como se utiliza en el campo de estadísticas . Las pruebas A / B son una forma de comparar dos versiones de una sola variable, típicamente probando la respuesta de un sujeto a la variante A contra la variante B, y determinando cuál de las dos variantes es más efectiva. [5]
La prueba A / B es una forma abreviada de un experimento controlado aleatorio simple , en el que se comparan dos muestras (A y B) de una única variable vectorial . [1] Estos valores son similares excepto por una variación que podría afectar el comportamiento de un usuario. Las pruebas A / B se consideran ampliamente la forma más simple de experimento controlado. Sin embargo, al agregar más variantes a la prueba, su complejidad aumenta. [6]
Las pruebas A / B son útiles para comprender la participación del usuario y la satisfacción de las funciones en línea, como una nueva función o producto. [7] Los grandes sitios de redes sociales como LinkedIn , Facebook e Instagram utilizan pruebas A / B para hacer que las experiencias de los usuarios sean más exitosas y como una forma de optimizar sus servicios. [7]
Hoy en día, las pruebas A / B también se utilizan para realizar experimentos complejos sobre temas como los efectos de red cuando los usuarios están desconectados, cómo los servicios en línea afectan las acciones de los usuarios y cómo los usuarios se influyen entre sí. [7] Muchas profesiones utilizan los datos de las pruebas A / B. Esto incluye ingenieros de datos, especialistas en marketing, diseñadores, ingenieros de software y emprendedores. [8] Muchos puestos se basan en los datos de las pruebas A / B, ya que permiten a las empresas comprender el crecimiento, aumentar los ingresos y optimizar la satisfacción del cliente. [8]
La versión A podría ser una versión utilizada en la actualidad (formando así el grupo de control), mientras que la versión B se modifica en algún aspecto frente a A (formando así el grupo de tratamiento). Por ejemplo, en un sitio web de comercio electrónico, el embudo de compra suele ser un buen candidato para las pruebas A / B, ya que incluso las disminuciones marginales en las tasas de abandono pueden representar una ganancia significativa en las ventas. A veces se pueden ver mejoras significativas a través de elementos de prueba como copiar texto, diseños, imágenes y colores, [9] pero no siempre. En estas pruebas, los usuarios solo ven una de las dos versiones, ya que el objetivo es descubrir cuál de las dos versiones es preferible. [10]
Las pruebas multivariadas o multinomiales son similares a las pruebas A / B, pero pueden probar más de dos versiones al mismo tiempo o usar más controles. Las pruebas A / B simples no son válidas para situaciones de observación , cuasi-experimentales u otras situaciones no experimentales , un lugar común con datos de encuestas, datos fuera de línea y otros fenómenos más complejos.