Ejecutar experimentos de Outreach

Compara variantes de campañas, interpreta los datos sobre la tasa de respuesta y aplica una ganadora sin reescribir el trabajo ya enviado.

Qué prueba un experimento

Un experimento compara campañas independientes mediante un único resultado:

Tasa de respuesta — cualquier respuesta dividida entre los mensajes enviados
Tasa de respuesta positiva — las respuestas clasificadas como positivas o interesadas divididas entre los mensajes enviados

Usa una campaña como control y al menos otra como variante. Cambia una sola variable importante cada vez —por ejemplo, el asunto, el enfoque inicial, la llamada a la acción o la audiencia— para poder interpretar cualquier diferencia. El historial existente de las campañas cuenta en los resultados, así que usa cohortes y períodos comparables.

Configurar el experimento

Abre Outreach > Experimentos y crea un borrador con un nombre, una métrica de resultado y un tamaño mínimo de muestra. El mínimo permitido es de 1 a 500 envíos por campaña.
Abre cada campaña y asígnala al experimento como Control o Variante. Necesitas al menos dos campañas asignadas para poder empezar.
Comprueba que la identidad del remitente, la calidad de la audiencia, la política de seguimiento y el calendario sean comparables, salvo cuando uno de estos elementos sea la variable que quieres probar.
Inicia el experimento.

Kit no reparte automáticamente los nuevos prospectos entre las campañas de un experimento en curso. Prepara cohortes comparables en cada campaña antes del lanzamiento o añade prospectos a cada variante de forma deliberada. No llenes una variante con una cohorte sustancialmente distinta y lo presentes como una prueba limpia.

Al archivar una campaña de un experimento en borrador, se elimina su asignación. Una vez iniciado el experimento, Kit bloquea el conjunto de campañas para que el tamaño mínimo de la muestra y los resultados se refieran siempre a las mismas variantes.

Interpretar el resultado

Kit muestra los envíos y la tasa total de respuesta de cada campaña. Cuando todas las campañas alcanzan la muestra mínima, Kit avisa al equipo que cumple los requisitos de que el experimento está listo para revisarse.

El mínimo sirve para iniciar la revisión, no demuestra que una diferencia sea estadísticamente significativa. Las muestras pequeñas, las audiencias desiguales, la estacionalidad, la entregabilidad y varios cambios simultáneos pueden llevar a conclusiones erróneas. Si has elegido la Tasa de respuesta positiva, comprueba cómo se clasificaron las respuestas antes de elegir una ganadora: la tabla de resultados actual sigue mostrando la tasa total de respuesta.

Concluir y después aplicar

Concluir registra qué campaña has elegido como ganadora y deja de considerar el experimento como una prueba en curso. No reescribe la configuración de las campañas ni mueve prospectos.

Al principio, el formulario de conclusión selecciona la campaña con la tasa total de respuesta más alta. Tómala como punto de partida, sobre todo cuando el resultado del experimento sea la Tasa de respuesta positiva: comprueba el resultado y selecciona la ganadora prevista antes de enviar el formulario.

Las campañas completadas no pueden elegirse como ganadoras y no aparecen en la lista. Si la campaña elegida se completa después de concluir el experimento, Kit detiene Aplicar ganadora antes de cambiar la configuración o mover un prospecto o mensaje.

Aplicar ganadora es una acción de despliegue independiente:

Si la ganadora no es el control, su configuración sustituye a la del control.
Los prospectos pendientes y en borrador pasan de las campañas perdedoras a la ganadora.
Los prospectos cuya investigación ya ha empezado, a quienes ya se ha enviado un mensaje o que han avanzado más en el flujo se quedan donde están.
Si el correo de un prospecto de una campaña perdedora ya existe en la ganadora, no se mueve para preservar la unicidad dentro de cada campaña.
Las campañas perdedoras se marcan como completadas.

Aplicar una ganadora no se puede deshacer desde la interfaz. Antes de confirmarlo, revisa la campaña seleccionada, su remitente y sus ajustes de IA, además del número de prospectos restantes.

En resumen

Se ha elegido una única métrica de resultado antes del lanzamiento
El control y las variantes difieren en un solo aspecto deliberado
Las cohortes, los períodos y las condiciones del remitente son comparables
Todas las campañas han alcanzado el mínimo de la muestra
La clasificación de las respuestas y el efecto práctico justifican la decisión
Se han revisado los ajustes de la ganadora y los prospectos restantes antes de aplicarla