Preguntas etiquetadas con multiple-comparisons

Sabemos que debemos aplicar correcciones tipo Benjamini Hochberg para pruebas de hipótesis múltiples a experimentos basados ​​en un solo conjunto de datos, para controlar la tasa de descubrimiento falso, de lo contrario, todos los experimentos que den un resultado positivo podrían ser falsos. Pero, ¿por qué no aplicamos este mismo …

24 hypothesis-testing  multiple-comparisons  bonferroni  false-discovery-rate 

Tengo valores de p de muchas pruebas y me gustaría saber si realmente hay algo significativo después de corregir las pruebas múltiples. La complicación: mis pruebas no son independientes. El método en el que estoy pensando (una variante del Método del producto de Fisher, Zaykin et al., Genet Epidemiol , …

24 correlation  multiple-comparisons  statistical-significance  genetics 

Leí el siguiente artículo: Perneger (1998) ¿Qué hay de malo con los ajustes de Bonferroni ? El autor resumió diciendo que el ajuste de Bonferroni tiene, en el mejor de los casos, aplicaciones limitadas en la investigación biomédica y no debe usarse al evaluar la evidencia sobre hipótesis específicas: Resumen …

23 hypothesis-testing  multiple-comparisons  bonferroni 

Estoy usando JMP para examinar las diferencias en la cubierta vegetal en grupos de formas de crecimiento (árboles, arbustos, hierbas, etc.) antes y después de tres tratamientos con un control. El tamaño de mi muestra es pequeño (n = 5) y la mayoría de mis distribuciones no se distribuyen normalmente. …

23 multiple-comparisons  nonparametric  tukey-hsd 

Andrew Gelman escribió un extenso artículo sobre por qué las pruebas de AB Bayesianas no requieren corrección de hipótesis múltiples: Por qué (generalmente) no tenemos que preocuparnos por las comparaciones múltiples , 2012. No entiendo bien: ¿por qué los métodos bayesianos no requieren múltiples correcciones de prueba? A ~ Distribution1 …

22 hypothesis-testing  bayesian  multiple-comparisons 

Estoy realizando pruebas estadísticas independientes con la misma hipótesis nula, y me gustaría combinar los resultados en un valor . Parece que hay dos métodos "aceptados": el método de Fisher y el método de Stouffer .pnortenorteNpagspagsp Mi pregunta es sobre el método de Stouffer. Para cada prueba por separado puntaje …

22 hypothesis-testing  chi-squared  p-value  multiple-comparisons  combining-p-values 

Cuando realizamos experimentos (en tamaños de muestra pequeños (generalmente el tamaño de muestra por grupo de tratamiento es de aproximadamente 7 ~ 8)) en dos grupos, utilizamos una prueba t para comprobar la diferencia. Sin embargo, cuando realizamos un ANOVA (obviamente para más de dos grupos), usamos algo similar a …

22 anova  multiple-comparisons  post-hoc  bonferroni  fishers-lsd 

Tengo dos preguntas sobre cuándo usar un ajuste de Bonferroni: ¿Es apropiado usar un ajuste de Bonferroni en todos los casos de pruebas múltiples? Si se realiza una prueba en un conjunto de datos, se divide ese conjunto de datos en niveles más finos (por ejemplo, se dividen los datos …

21 multiple-comparisons  bonferroni  type-i-and-ii-errors 

Después de realizar el análisis de componentes principales (PCA), quiero proyectar un nuevo vector en el espacio PCA (es decir, encontrar sus coordenadas en el sistema de coordenadas PCA). He calculado PCA en lenguaje R usando prcomp. Ahora debería poder multiplicar mi vector por la matriz de rotación PCA. ¿Deben …

21 r  pca  r  variance  heteroscedasticity  misspecification  distributions  time-series  data-visualization  modeling  histogram  kolmogorov-smirnov  negative-binomial  likelihood-ratio  econometrics  panel-data  categorical-data  scales  survey  distributions  pdf  histogram  correlation  algorithms  r  gpu  parallel-computing  approximation  mean  median  references  sample-size  normality-assumption  central-limit-theorem  rule-of-thumb  confidence-interval  estimation  mixed-model  psychometrics  random-effects-model  hypothesis-testing  sample-size  dataset  large-data  regression  standard-deviation  variance  approximation  hypothesis-testing  variance  central-limit-theorem  kernel-trick  kernel-smoothing  error  sampling  hypothesis-testing  normality-assumption  philosophical  confidence-interval  modeling  model-selection  experiment-design  hypothesis-testing  statistical-significance  power  asymptotics  information-retrieval  anova  multiple-comparisons  ancova  classification  clustering  factor-analysis  psychometrics  r  sampling  expectation-maximization  markov-process  r  data-visualization  correlation  regression  statistical-significance  degrees-of-freedom  experiment-design  r  regression  curve-fitting  change-point  loess  machine-learning  classification  self-study  monte-carlo  markov-process  references  mathematical-statistics  data-visualization  python  cart  boosting  regression  classification  robust  cart  survey  binomial  psychometrics  likert  psychology  asymptotics  multinomial 

Estoy revisando un trabajo que ha realizado> 15 pruebas separadas de 2 x 2 Chi Square. Sugerí que debían corregir las comparaciones múltiples, pero respondieron que todas las comparaciones fueron planificadas y, por lo tanto, esto no es necesario. Siento que esto no debe ser correcto, pero no puedo encontrar …

20 hypothesis-testing  multiple-comparisons 

Escuché que cuando muchas especificaciones del modelo de regresión (por ejemplo, en OLS) se consideran posibilidades para un conjunto de datos, esto causa múltiples problemas de comparación y los valores p y los intervalos de confianza ya no son confiables. Un ejemplo extremo de esto es la regresión gradual. ¿Cuándo …

20 regression  frequentist  multiple-comparisons 

¿Cuál es el método preferido para realizar post-hocs para pruebas dentro de las asignaturas? He visto trabajos publicados en los que se emplea el HSD de Tukey, pero una revisión de Keppel y Maxwell & Delaney sugiere que la probable violación de la esfericidad en estos diseños hace que el …

20 r  repeated-measures  multiple-comparisons  post-hoc  sphericity 

He leído este gran artículo de David Colquhoun: Una investigación de la tasa de descubrimiento falso y la mala interpretación de los valores p (2014). En esencia, explica por qué la tasa de descubrimiento falso (FDR) puede ser tan alta como a pesar de que controlamos el error tipo I …

19 hypothesis-testing  statistical-significance  p-value  multiple-comparisons  false-discovery-rate 

¿Cuán conservadora es la corrección de pruebas múltiples de Benjamini-Hochberg en relación con el número total de comparaciones? Por ejemplo, si tengo una lista de 18,000 funciones para dos grupos y realizo una prueba de Wilcoxon para obtener un valor p. Ajuste ese valor p usando Benjamini-Hochberg y casi nada …

19 multiple-comparisons  p-value 

Esta un ejercicio determinado en Teoría de la Probabilidad: La lógica de la ciencia por Edwin Jaynes, 2003. Hay una solución parcial aquí . He ideado una solución parcial más general y me preguntaba si alguien más la ha resuelto. Esperaré un poco antes de publicar mi respuesta, para darle …

19 independence  likelihood-ratio  hypothesis-testing  multiple-comparisons