¿Cuáles son algunos buenos marcos para la selección de métodos?

He estado buscando marcos teóricos para la selección de métodos (nota: no selección de modelos) y he encontrado muy poco trabajo sistemático motivado matemáticamente. Por "selección de método", me refiero a un marco para distinguir el método apropiado (o mejor, óptimo) con respecto a un problema o tipo de problema.

Lo que he encontrado es sustancial, aunque poco a poco, trabajar en métodos particulares y su ajuste (es decir, selección previa en métodos bayesianos), y la selección de métodos a través de la selección de sesgo (por ejemplo, Política inductiva: la pragmática de la selección de sesgo ). Puede que no sea realista en esta etapa temprana del desarrollo del aprendizaje automático, pero esperaba encontrar algo como lo que hace la teoría de la medición al prescribir transformaciones y pruebas admisibles por tipo de escala, solo en gran medida en el ámbito de los problemas de aprendizaje.

¿Alguna sugerencia?

machine-learning methodology theory

— John L. Taylor
fuente

¿Cuál es la diferencia entre la selección del modelo modelselection.org (tema candente en estadística durante los últimos 20 años) y la selección del método.

— robin girard

Si bien la selección de modelos generalmente implica la calificación de modelos dentro de una familia de distribuciones, en función de su ajuste y penalizando el número de parámetros utilizados (a la AIC y BIC), mientras que la selección de métodos es más general. La selección de métodos implica enfrentarse a un problema (por ejemplo, probar, clasificar, predecir) para el que tenemos algunos conocimientos previos (se sabe que las variables son (por ejemplo, independencia, tipo de datos) y para las cuales se hacen suposiciones auxiliares (por ejemplo, normalidad, homocedasticidad) , y debemos seleccionar un método.

— John L. Taylor

Ahora hay prescripciones matemáticas a lo largo de las líneas de tipo de medición, resultados de convergencia, optimización y complejidad de tiempo / espacio, pero no hay un marco para su aplicación sistemática, que yo sepa, de ahí la pregunta.

— John L. Taylor

¿Puede dar un ejemplo de selección de método con más detalles (un enlace a una página o un documento podría estar bien), esto podría ayudarme a descubrir con mayor precisión. Gracias de antemano

— robin girard

El artículo mencionado aborda la selección de métodos, en general. En cuanto a ejemplos específicos y más detalles, se pueden encontrar dispersos entre disciplinas meta-metodológicas específicas (teoría de la medición, teoría del aprendizaje algorítmico, teoría del aprendizaje estadístico, teoría de la complejidad), pero no he encontrado un tratamiento sistemático, de ahí la pregunta. Si desea analizar estos problemas en general, puede enviarme un correo electrónico a johnnylogic a gmail.

— John L. Taylor

John, no estoy seguro de que mi sugerencia pueda ser de ayuda. Pero, en cualquier caso, el libro Intuitive Biostatistics de Harvey Motulsky puede ser de ayuda. El Capítulo 37 'Elección de una prueba' tiene una tabla bastante buena en la página 298 que le dice dada la naturaleza del conjunto de datos y el problema que está abordando qué método estadístico debe usar. Amazon te permite buscar en este libro.

Buena suerte.

— Sympa
fuente