¿Cómo pueden los estudiantes de estadísticas implementar realmente las pruebas A / B cuando no tienen una gran cantidad de datos disponibles para sitios web personales y no saben mucho sobre el diseño de páginas web?

Resulta que en realidad se puede obtener un poco de “poder estadístico” de “no tantas” observaciones (siempre y cuando el comportamiento en cuestión tenga un proceso de generación de datos bien entendido), por lo que si estuviera en un ambiente de clase, podría simplemente implementar “pruebas A / B” en la clase, donde una mitad aleatoria de la clase es control y la otra mitad es tratamiento.

Además, digo que si está interesado en las pruebas A / B hasta el final de mostrar a los estudiantes que las estadísticas son útiles en el mundo real, estoy convencido de que mostrar los resultados de los estudiantes de una econometría bien hecha es mucho más útil y divertido, con una nota lateral posterior de que se pueden usar los mismos métodos en las pruebas A / B, describiendo algunos casos. Los problemas en econometría son quizás más interesantes porque requieren quizás una consideración cualitativa del problema en cuestión (¿por qué la investigación constituye un experimento? ¿Qué podemos hacer para estructurar los datos en una estructura pseudo experimental?), En lugar del conveniente experimento aleatorio proporcionado para en A / B. Estoy pensando en la investigación de Duflo, por ejemplo.