Estadísticas y Big Data

Tengo problemas para entender la maldición de la dimensionalidad. Específicamente, lo encontré mientras hacía el scikit-learntutorial en python. ¿Alguien puede explicar lo siguiente de una manera más simple? Lo siento, he estado tratando de entender durante mucho tiempo y no puedo entender cómo se les ocurrió el cálculo de la …

14 machine-learning 

He estado tratando de entender el algoritmo de Metropolis-Hastings para escribir un código para estimar los parámetros de un modelo (es decir, F( x ) = a ∗ xF(X)=un∗Xf(x)=a*x ). Según la bibliografía, el algoritmo Metropolis-Hastings tiene los siguientes pasos: Generar Yt∼ q( yEl | Xt)Yt∼q(yEl |Xt)Y_t \sim q(y|x^t) Xt …

14 mcmc  metropolis-hastings 

Me pregunto si alguien podría decirme si he calculado correctamente el intervalo de confianza para la diferencia entre dos proporciones. El tamaño de la muestra es 34, de los cuales 19 son mujeres y 15 son hombres. Por lo tanto, la diferencia en proporciones es 0.1176471. Calculo el intervalo de …

14 r  confidence-interval 

Recientemente, las preguntas de exploración aleatoria activaron un recuerdo de comentarios fuera de la mano de uno de mis profesores hace unos años, advirtiendo sobre el uso de proporciones en los modelos de regresión. Entonces comencé a leer sobre esto, y finalmente llegué a Kronmal 1993. Quiero asegurarme de que …

14 regression  modeling  interaction  weighted-regression  ratio 

Me preguntaba si la regresión de Poisson tiene un término de error. ¿Puede una regresión de Poisson tener efectos aleatorios y un término de error? Estoy confundido sobre este punto. En la regresión logística, no hay término de error porque su variable de resultado es binaria. ¿Es ese el único …

14 regression  mixed-model  generalized-linear-model  poisson-regression 

Imagine la siguiente configuración: tiene 2 monedas, la moneda A que se garantiza que es justa y la moneda B que puede ser justa o no. Se le pide que haga 100 lanzamientos de monedas, y su objetivo es maximizar el número de caras . Su información previa sobre la …

14 bayesian  decision-theory 

¿Alguien puede ayudar a explicar algunas de las matemáticas detrás de la clasificación en CART? Estoy buscando entender cómo ocurren dos etapas principales. Por ejemplo, entrené a un clasificador CART en un conjunto de datos y usé un conjunto de datos de prueba para marcar su rendimiento predictivo pero: ¿Cómo …

14 regression  classification  data-mining  cart 

Tengo variables aleatorias X0 0, X1, ... , XnorteX0 0,X1,...,XnorteX_0,X_1,\dots,X_n . X0X0X_0 tiene una distribución normal con media μ>0μ>0\mu>0 y varianza 111 . Los X1,…,XnX1,…,XnX_1,\dots,X_n rvs se distribuyen normalmente con media 000 y varianza 111 . Todo es mutuamente independiente. Supongamos que EEE denota el evento de que X0 0X0 …

14 probability  normal-distribution 

Acabo de empezar a aprender a usar Stan y rstan. A menos que siempre haya estado confundido acerca de cómo funcionaba JAGS / BUGS, pensé que siempre tenía que definir una distribución previa de algún tipo para cada parámetro del modelo que se extraería. Sin embargo, parece que no tiene …

14 mcmc  prior  jags  graphical-model  stan 

Recientemente implementé un filtro de Kalman en el ejemplo simple de medir la posición de una partícula con una velocidad y aceleración aleatorias. Descubrí que el filtro Kalman funcionaba bien, pero luego me pregunté cuál era la diferencia entre esto y simplemente hacer un promedio móvil. Descubrí que si usaba …

14 smoothing  kalman-filter 

Me gustaría saber la diferencia entre el análisis de datos de panel y el análisis de modelo mixto. Que yo sepa, tanto los datos de panel como los modelos mixtos usan efectos fijos y aleatorios. Si es así, ¿por qué tienen nombres diferentes? ¿O son sinónimos? He leído la siguiente …

14 mixed-model  references  panel-data 

En el modelado climático, está buscando modelos que puedan representar adecuadamente el clima de la Tierra. Esto incluye mostrar patrones semicíclicos: cosas como la Oscilación del Sur de El Niño. Pero la verificación del modelo ocurre generalmente en períodos de tiempo relativamente cortos, donde hay datos de observación decentes (últimos …

14 time-series  model-comparison  fourier-transform  climate 

¿Hay buenos resúmenes (reseñas, libros) sobre diversas aplicaciones de la cadena de Markov Monte Carlo (MCMC)? He visto a Markov Chain Monte Carlo en la práctica , pero este libro parece un poco viejo. ¿Hay más libros de actualización sobre diversas aplicaciones de MCMC en áreas como aprendizaje automático, visión …

14 machine-learning  mcmc  inference  references  application 

Hice un modelo lineal generalizado con una sola variable de respuesta (continua / distribuida normalmente) y 4 variables explicativas (3 de las cuales son factores y la cuarta es un número entero). He usado una distribución de errores gaussiana con una función de enlace de identidad. Actualmente estoy comprobando que …

14 regression  generalized-linear-model  ancova  assumptions  scatterplot 

Considere estas dos imágenes en escala de grises: La primera imagen muestra un patrón de río serpenteante. La segunda imagen muestra ruido aleatorio. Estoy buscando una medida estadística que pueda usar para determinar si es probable que una imagen muestre un patrón de río. La imagen del río tiene dos …

14 variance  spatial  pattern-recognition