Considere un tipo de subasta donde se le presenten, digamos, 1000 clientes potenciales. Según la información sobre estas perspectivas (edad, sexo, raza, ingresos, logros educativos y similares), puede 'ofertar' para presentar su producto a una fracción de ellos, digamos 250. (Ignore el costo de la oferta). Para maximizar sus posibilidades de seleccionar el subconjunto correcto, probablemente usaría un modelo de 'simpatía' de nuestro producto creado mediante regresión logística. Puedo buscar mi camino a través de esta parte lo suficientemente bien.
Sin embargo, para construir el modelo de simpatía del producto, tengo que hacer una investigación de mercado, probando la presentación del producto en temas que podemos reclutar de la población en general. Esto es realmente bastante costoso. Además, probablemente debería ajustarse a la demografía de la población de la que se extraen las perspectivas. Por ejemplo, un diseño factorial, por ejemplo, podría pedirnos que reclutemos sujetos de prueba en igual proporción a través de los niveles del factor racial, cuando en realidad es probable que encontremos muy pocos nativos americanos, digamos, en los 1000 prospectos, y simplemente podemos elige no lanzarles nada en general. (Triste pero cierto.)
¿Cómo debería diseñarse un experimento así? Para ser concretos, las variables de diseño son todos factores categóricos y ordinales, la fracción de licitación es un parámetro de entrada (1/4 en el ejemplo citado anteriormente), al igual que el número máximo de sujetos que se pueden reclutar. Parece que tal vez sea adecuada alguna combinación de diseño experimental y muestreo aleatorio, pero estoy abierto a todas las sugerencias e indicadores razonables.
También debo tener en cuenta que, dados los probables pequeños tamaños de efecto y los pequeños grupos de reclutamiento de muestras que podemos permitirnos, es poco probable que la investigación de mercado arroje coeficientes de regresión estadísticamente significativos. Y por lo tanto, optimizar demasiado el diseño experimental es probablemente una tontería, y cualquier procedimiento razonablemente insano será suficiente.