Todo el contenido Experimentos

De la entrevista a la prueba A/B.

Una entrevista sugiere qué puede cambiar el comportamiento. Una prueba muestra si cambió.

Los hallazgos de entrevistas tienen una debilidad conocida: convencen, pero son difíciles de medir. Los equipos de producto, con razón, preguntan cuánto vale algo antes de cambiar el roadmap. Mi respuesta es convertir el hallazgo en una hipótesis que se pueda probar.

Del hallazgo a la hipótesis

En Gameram, convertí hallazgos de entrevistas en pruebas A/B. Lo que las personas contaban se volvía una hipótesis: si la entrevista muestra qué traba el camino, cambiar ese punto debería cambiar el comportamiento medido.

Una de esas pruebas aumentó la conversión un 30%.

La prueba no reemplaza a la entrevista. La entrevista dice qué probar y por qué. La prueba dice cuánto.

Cuando los números vienen antes

El camino inverso también funciona. Después del lanzamiento del modo oscuro, los datos mostraban que mucha gente seguía con el tema claro. En las entrevistas con usuarios activos y nuevos, el diseño funcionó bien. El problema era otro: muchas personas no sabían que podían cambiar el tema.

Una encuesta a unos 650 usuarios lo confirmó: el 74% de quienes conocían la opción usaba el modo oscuro, frente al 54% de quienes no la conocían. Los datos mostraban el resultado. La investigación explicó el motivo. Lee el caso completo.

Lo que me llevo

  • Escribir el hallazgo como hipótesis. “Si cambiamos esto, esperamos ver aquello” deja claro qué medir.
  • Dejar que la entrevista elija la prueba. Probar lo que las personas dijeron que traba cuesta menos que probarlo todo.
  • Volver a las personas cuando el número sorprende. Un resultado inesperado es una nueva pregunta de investigación.

Un buen insight se convierte en experimento. Y un buen experimento vuelve a la investigación.

Algunos detalles se omitieron por confidencialidad.

Sigue leyendo

Ver los casos