Pruebas A/B para pujas

Si deseas medir el impacto de las pujas con respecto a la cascada, lleva a cabo una prueba A/B para dividir tu público en dos segmentos. De esta manera, te asegurarás de que los cambios que implementes se midan de manera efectiva, en lugar de depender de pruebas previas a la publicación que pueden tener un CPM fluctuante debido a las diferencias en el número de usuarios y las actualizaciones de la app, entre otros factores.

Resulta difícil medir el éxito comparando el rendimiento antes y después de la implementación de las pujas debido a la dificultad para aislar otros factores. No obstante, las pruebas A/B muestran con mayor claridad el aumento del rendimiento que se obtiene de las pujas. El valor de las pujas no se debería medir únicamente según el rendimiento, ya que la migración hacia las pujas también proporciona eficiencias operativas.

Probar en plataformas de mediación

De ser posible, realiza pruebas A/B a través de tu plataforma de mediación o análisis, ya que estas plataformas están configuradas para controlar factores de manera efectiva y proporcionar resultados precisos. Consulta la documentación de tu plataforma para configurar pruebas.

Si tu plataforma de mediación o análisis no admite pruebas A/B, sigue los pasos y las prácticas recomendadas que aparecen más adelante para medir la diferencia entre las pujas y la cascada.

Crear una prueba A/B

Prácticas recomendadas

  • Prueba todo el tráfico en una app al mismo tiempo e incluye todos los formatos de anuncio. Si no quieres probar la totalidad de una app, puedes someterla a prueba en iOS o Android, en tanto haya tráfico suficiente.
  • Haz la prueba con, al menos, 30.000 impresiones diarias en cada grupo (60.000 impresiones diarias en total). Una cantidad inferior puede proporcionarte resultados imprecisos.
  • Haz la prueba durante un período de 14 días o más para comparar el rendimiento de manera adecuada, ya que las métricas pueden variar durante los primeros 14 días.
  • Migra todas las redes publicitarias de cascada existentes que puedas al mismo tiempo a las pujas. Pero no introduzcas nuevas redes publicitarias en esta etapa, ya que el incremento en los ingresos se puede deber a la nueva demanda. Más adelante, puedes realizar una prueba adicional para observar el impacto generado por las nuevas redes.
  • Incluye varios orígenes de demanda de red publicitaria para aumentar la competencia.
  • Antes de comenzar a medir el rendimiento, asegúrate de que tu integración no presente errores.

Configuración de la prueba A/B

Para atribuir el aumento en los ingresos a las pujas, todas las variables del experimento deben ser idénticas, con la excepción del reemplazo del modelo de cascada por el de pujas.

Se llevará a cabo una prueba A/B con dos grupos:

  • Grupo de control: una cascada tradicional
  • Grupo de prueba: una combinación validada de cascada y pujas

Configuración de la plataforma de mediación

Grupo de control

Configura la cascada para tu ubicación, tal como lo harías normalmente.

Grupo de prueba

Para mediación que admite pujas

  • Para Audience Network, reutiliza la ubicación de cascada existente con los ingresos más altos (por sistema operativo y formato de anuncio) si la plataforma de mediación lo permite. Si la plataforma de mediación no admite el mismo identificador de ubicación para el grupo de prueba y el de control, deberás crear un nuevo identificador de ubicación de Audience Network.
  • La única configuración de ubicación relevante para las pujas es el formato de anuncio. Por ejemplo, los objetivos de precio de cascada en el nivel de la ubicación no se aplicarán a las pujas.
  • En el caso de las otras redes publicitarias, consulta la documentación correspondiente para determinar si deberías reutilizar una ubicación existente o crear una nueva. En la mayoría de las instancias, deberías conservar la ubicación existente, ya que se calibrará en relación con el rendimiento histórico.

Para redes publicitarias que no admiten pujas

  • Duplica tus ubicaciones de cascada para que se utilicen distintos identificadores de ubicación en los grupos de prueba y de control. Asegúrate de conservar la misma configuración, como los precios mínimos. De esta manera, podrás medir los ingresos por separado en los grupos de prueba y de control.
  • Algunas plataformas de mediación te permiten duplicar automáticamente tu cascada actual para que no tengas que configurar manualmente las redes publicitarias existentes.

Medir los resultados de las pruebas A/B

  • La métrica clave para medir el rendimiento en las pujas es la de ingresos promedio por usuario activo por día (ARPDAU), que mide los ingresos totales y no el rendimiento por red. Difiere de la cascada, donde la métrica de éxito principal es el CPM de la red, y la tasa de relleno y la proporción de pago total se utilizan como medidas secundarias.
  • Se espera que los CPM de la red cambien una vez que inicies las pujas. Tal cambio se debe a que las redes publicitarias obtendrán acceso a oportunidades más grandes y podrán mostrar más impresiones. En la cascada, las redes publicitarias estaban contenidas en su posición de cascada para lograr un resultado determinado. En un entorno de pujas, las redes publicitarias pueden ofrecer más impresiones con un CPM mayor o menor, lo cual tendrá impacto en el CPM total. En lugar de centrarse en las fluctuaciones del CPM, es importante observar los ARPDAU.
  • Además, es posible que notes una leve fluctuación en las impresiones por usuario activo por día (IMP/DAU). Esto se puede deber a dos motivos principales:
    • Una caída en la latencia al migrar a las pujas, especialmente cuando tienes varios precios mínimos de Facebook Audience Network.
    • Las IMP/DAU pueden aumentar si no hay una opción de respaldo en la cascada. Si las impresiones no se mostraban anteriormente en la cascada porque se encontraban por debajo del precio mínimo, ahora, dichas impresiones serán completadas por los postores.
    • Si te preocupa un aumento en las IMP/DAU, configura un precio para toda la subasta que se encuentre al mismo nivel que el precio mínimo de tu cascada. Ten en cuenta que esta configuración no mejorará el rendimiento, ya que el postor de Audience Network ignorará los precios mínimos en su subasta.