Estadísticas y Big Data

Primero, permítanme decir que estoy un poco fuera de mi alcance aquí, así que si esta pregunta necesita ser reformulada o cerrada como un duplicado, háganmelo saber. Puede ser simplemente que no tengo el vocabulario adecuado para expresar mi pregunta. Estoy trabajando en una tarea de procesamiento de imágenes en …

9 classification 

Disculpe lo que puede ser una pregunta obvia sobre bootstrapping. Fui absorbido temprano en el mundo bayesiano y nunca exploré el bootstrap tanto como debería haberlo hecho. Me encontré con un análisis en el que los autores estaban interesados ​​en un análisis de supervivencia relacionado con algún tiempo de datos …

9 confidence-interval  bootstrap 

Siguiendo con mi pregunta anterior , la solución a las ecuaciones normales para la regresión de crestas viene dada por: β^λ=(XTX+λI)−1XTyβ^λ=(XTX+λI)−1XTy\hat{\beta}_\lambda = (X^TX+\lambda I)^{-1}X^Ty ¿Podría ofrecer alguna guía para elegir el parámetro de regularización ? Además, dado que la diagonal de crece con el número de observaciones , ¿debería también …

9 regression  regularization  ridge-regression 

Estoy usando la evolfftfunción en el RSEISpaquete R para hacer un análisis STFT de una señal. La señal es de una hora de duración y se adquirió durante 3 condiciones diferentes, en particular 0-20 'control, 20'-40' estímulo, 40'-60 'después del estímulo. Visualmente, veo un cambio en el espectrograma durante estos …

9 time-series  hypothesis-testing  anova  fourier-transform 

Es bastante difícil buscar información en la Web sobre algo cuando no sabes qué palabras se usan comúnmente para describirlo. En este caso, me pregunto cómo se llama cuando incluye otro predictor en una serie de tiempo. Como ejemplo, digamos que estoy modelando una variable usando AR (3):XXX Xt=φ1Xt−1+φ2Xt−2+φ3Xt−3+εtXt=φ1Xt−1+φ2Xt−2+φ3Xt−3+εt X_t …

9 time-series  terminology 

Los institutos de votación franceses se enfrentan actualmente a una gran crisis después de que recientemente publicaron lo que hasta ahora solo se puede llamar la encuesta más ridícula sobre la carrera de caballos de las elecciones presidenciales de 2012. El Senado francés ahora está considerando legislar sobre el tema …

9 sampling  polling 

Partiendo de la publicación Cómo gestionar eficientemente un proyecto de análisis estadístico y el ProjectTemplatepaquete en R ... P: ¿Cómo se construye la estructura de directorios de su proyecto estadístico cuando varios idiomas tienen una gran importancia (por ejemplo, R AND Splus)? La mayoría de las discusiones sobre este tema …

9 r  project-management  splus 

Como pregunta, dado que podemos hacer la conversión de odds ratio (p1/q1)/(p2/q2)a riesgo relativo con (p1/(p1+q1))/(p2/(p2+q2))bastante facilidad, me pregunto si hay algo a lo que deba prestar atención antes de hacer esto. Es obvio que si estoy haciendo un estudio de casos y controles, no debería hacer una conversión, porque …

9 epidemiology  relative-risk  odds 

Creo que esta es una pregunta bastante básica, pero me doy cuenta de que no entiendo bien el término corrección de continuidad. Uso R y encontré la misma sintaxis correct=TRUEpara ambos chisq.testy mcnemar.test. ¿Se refieren a un método diferente de corrección de continuidad? He oído que la continuidad del yate …

9 r  chi-squared  yates-correction 

Motivación : estoy escribiendo un estimador de estado en MATLAB (el filtro de Kalman sin perfume), que requiere la actualización de la raíz cuadrada (triangular superior) de una matriz de covarianza en cada iteración (es decir, para una matriz de covarianza , es cierto que ). Para poder realizar los …

9 matlab  covariance-matrix  numerics 

Un colega en estadísticas aplicadas me envió esto: "Me preguntaba si conoces alguna forma de descubrir la verdadera dimensión del dominio de una función. Por ejemplo, un círculo es una función unidimensional en un espacio bidimensional. Si no sé cómo dibujar, ¿hay un estadística que puedo calcular que me dice …

9 large-data 

Tengo mediciones diarias de dióxido de nitrógeno durante un año (365 días) y el intercuartil (IQR) es de 24 microgramos por metro cúbico. ¿Qué significa "24" en este contexto, aparte de la definición de IQR, que es la diferencia entre el percentil 25 y 75 ? ¿Cómo explicarías esta cifra …

9 descriptive-statistics 

Ocasionalmente, veo en la literatura que una variable categórica como el sexo está "parcializada" o "regresada" en el análisis de regresión (efectos fijos o efectos mixtos). Tengo problemas con los siguientes problemas prácticos relacionados con dicha declaración: (1) Por lo general, el método de codificación no se menciona en el …

9 regression 

Actualmente estoy mirando la forma primaria sin restricciones del clasificador uno contra todos ∑i=1NI∑k=1,k≠yiNKL(1+wk⋅xi−wyi⋅xi)∑i=1NI∑k=1,k≠yiNKL(1+wk⋅xi−wyi⋅xi)\sum\limits_{i=1}^{N_I} \sum\limits_{k=1,\atop k \neq y_i}^{N_K} L(1+ \mathbf{w_k}\cdot\mathbf{x_i}-\mathbf{w_{y_i}}\cdot\mathbf{x_i}) dónde NININ_I es el número de instancias, es el número de clases, es el número de características, es una matriz de datos , es un vector de etiquetas de clase, …

9 classification  loss-functions 

Si dos clases y tienen una distribución normal con parámetros conocidos ( , como sus medias y , son sus covarianzas) ¿cómo podemos calcular error del clasificador de Bayes para ellos?w1w1w_1w2w2w_2METRO1METRO1M_1METRO2METRO2M_2Σ1Σ1\Sigma_1Σ2Σ2\Sigma_2 Supongamos también que las variables están en el espacio N-dimensional. Nota: Una copia de esta pregunta también está disponible …

9 probability  self-study  normality-assumption  naive-bayes  bayes-optimal-classifier