Sinceramente, siento que el panorama de las pruebas A / B está cambiando un poco y tengo curiosidad por ver cómo todo evoluciona con el tiempo. Estoy siguiendo esta pregunta y espero leer un montón de buenas respuestas que discutan los pros y los contras de todo esto.
Para la web e incluso en la web receptiva de hoy, las pruebas A / B podrían ser extremadamente valiosas. Estoy de acuerdo con las respuestas aquí que tratan de vender internamente las primeras 5 pruebas A / B que realmente puede ejecutar y cuál podría ser el valor. Si estas 5 pruebas A / B muestran valor, o más bien si estas pruebas no se realizan, ya sea que el costo o el daño sean demasiado altos, entonces creo que la venta interna será efectiva.
Sin embargo, en mi experiencia también he visto lo contrario: muchas organizaciones se lanzan a las pruebas A / B y con todo el entusiasmo realizan las pruebas iniciales 2 o 3, pero luego se congelan y nunca realizan una prueba A / B en los años venideros.
- ¿Cuál es la diferencia entre Data science, Big Data y Hadoop?
- ¿Qué opciones de carrera están disponibles en Big Data si uno no tiene un fondo de estadísticas / codificación?
- ¿Cuáles son las herramientas de minería / raspado web más comunes utilizadas actualmente?
- ¿Cuál es la relación entre sobreajuste y cambio de datos?
- Cómo descubrir las características más importantes en un conjunto de datos con más de 500 predictores
Las ganancias tempranas son críticas de obtener y difíciles de lograr si a) las pruebas no están definidas adecuadamente b) los resultados no muestran claras victorias / diferencias entre los segmentos A y B yc) no hay un valor diferencial si la prueba no se realizó (relacionado con b arriba). Sin las primeras victorias con las pruebas iniciales, se vuelve realmente difícil mantener a una organización / equipo para que se quede con ellas.
Sin embargo, si está creando aplicaciones móviles nativas , la pregunta adquiere otra dimensión. Experimentar con flujos de pantalla A / B diferentes y complejos no es prácticamente posible, porque en la mayoría de los casos implican el lanzamiento de nuevas versiones de aplicaciones en las tiendas de aplicaciones que requieren tiempo y esfuerzo. En la mayoría de los casos, se limita a hacer pruebas simples y se pueden hacer de otras maneras: segmentando finamente a sus usuarios; o ejecutar sus pruebas solo por un período de tiempo limitado (digamos 2 horas) para obtener datos direccionales.
