Estadísticas y Big Data

¿Cuál es la diferencia entre Outlier y Anomaly en el contexto del aprendizaje automático? Tengo entendido que ambos se refieren a lo mismo.

13 outliers  terminology  anomaly-detection 

Veo mencionado en varios lugares que ANOVA hace su estimación utilizando el método de los momentos. Esa afirmación me confunde porque, aunque no estoy familiarizado con el método de los momentos, entiendo que es algo diferente y no equivalente al método de máxima probabilidad; Por otro lado, ANOVA puede verse …

13 anova  mixed-model  maximum-likelihood  method-of-moments 

En Métodos estadísticos en las ciencias atmosféricas , Daniel Wilks señala que la regresión lineal múltiple puede conducir a problemas si hay intercorrelaciones muy fuertes entre los predictores (3a edición, página 559-560): Una patología que puede ocurrir en la regresión lineal múltiple es que un conjunto de variables predictoras que …

13 regression  pca  bias 

¿Alguien puede dar ejemplos de por qué elegir uno sobre el otro? ¿Se calculan de manera diferente?

13 sem  psychometrics  psychology  scale-construction 

Estaba leyendo los modelos lineales de libros de texto de Faraway con R (primera edición) el fin de semana pasado. Faraway tenía un capítulo llamado "Estrategia estadística e incertidumbre modelo". Describió (página 158) que genera artificialmente algunos datos usando un modelo muy complicado, a continuación, preguntó a sus estudiantes para …

13 predictive-models  modeling  interpretation 

Tengo problemas para entender las probabilidades, y me gustaría una explicación básica sobre cómo interpretarlas. He encontrado varias publicaciones relacionadas con las probabilidades, pero la mayoría de ellas son más complejas de lo que estoy tratando de entender. Aquí hay un ejemplo de cómo interpreto las probabilidades: si las probabilidades …

13 probability  intuition  odds 

Estoy trabajando en un proyecto de filtrado colaborativo (CF), es decir, completar una matriz parcialmente observada o, en general, un tensor. Soy un novato en el campo, y para este proyecto eventualmente tengo que comparar nuestro método con otros conocidos que hoy en día, los métodos propuestos se comparan con …

13 optimization  recommender-system  matrix-decomposition 

Mi pregunta se refiere a una técnica de cálculo explotada en geoR:::.negloglik.GRFo geoR:::solve.geoR. En una configuración de modelo mixto lineal: donde y son los efectos fijos y aleatorios, respectivamente. Además,Y= Xβ+ Zb + eY=Xβ+Zsi+mi Y=X\beta+Zb+e ββ\betasisibΣ = cov ( Y)Σ=cov(Y)\Sigma=\text{cov}(Y) Al estimar los efectos, es necesario calcular ( X′Σ- 1X)- …

13 r  eigenvalues  matrix-decomposition  matrix-inverse  cholesky 

Si lanzo un par de dados un número infinito de veces, y siempre selecciono el valor más alto de los dos, ¿la media esperada de los valores más altos excederá 3.5? Parece que debe ser porque si lanzo un millón de dados y selecciono el valor más alto cada vez, …

13 dice 

Esta pregunta está inspirada en la larga discusión en los comentarios aquí: ¿Cómo usa la regresión lineal la distribución normal? En el modelo de regresión lineal habitual, para simplificar aquí escrito con un solo predictor: Yi=β0+β1xi+ϵiYi=β0+β1xi+ϵi Y_i = \beta_0 + \beta_1 x_i + \epsilon_i donde xixix_i son constantes conocidas y …

13 regression  normal-distribution  mathematical-statistics  maximum-likelihood  least-squares 

Una pregunta vergonzosamente simple, pero parece que no se ha hecho antes en Cross Validated: ¿Cuál es la definición de un modelo de regresión? También una pregunta de soporte, ¿Qué no es un modelo de regresión? Con respecto a esto último, estoy interesado en ejemplos difíciles donde la respuesta no …

13 regression  linear-model  model  terminology  definition 

Perdón por la vaga pregunta, pero este gráfico aparece en Biddle et al. 2009 y no he encontrado nada igual antes. Es un gráfico de barras con bordes biselados, a veces 'cuernos'. ¿Qué significan estos? ¿Este tipo de gráfico tiene un nombre? Según /meta/244083/site-for-asking-about-charts , pensé que Academia era el …

13 data-visualization  boxplot 

El consenso general sobre una pregunta similar, ¿es incorrecto referirse a los resultados como "altamente significativos"? es que "altamente significativo" es una forma válida, aunque no específica, de describir la fuerza de una asociación que tiene un valor p muy por debajo de su umbral de significancia preestablecido. Sin embargo, …

13 hypothesis-testing  statistical-significance  p-value  terminology 

Tengo un conjunto de datos que contiene variables categóricas y variables continuas. Se me aconsejó transformar las variables categóricas como variables binarias para cada nivel (es decir, A_level1: {0,1}, A_level2: {0,1}). Creo que algunos han llamado a esto "variables ficticias". Dicho esto, ¿sería engañoso centrar y escalar todo el conjunto …

13 categorical-data  data-transformation  centering 

Tengo un conjunto de datos que consta de 15 K muestras etiquetadas (de 10 grupos). Quiero aplicar la reducción de dimensionalidad en 2 dimensiones, eso tomaría en consideración el conocimiento de las etiquetas. Cuando uso técnicas de reducción de dimensionalidad no supervisadas "estándar" como PCA, el diagrama de dispersión parece …

13 machine-learning  pca  dimensionality-reduction  supervised-learning  discriminant-analysis