Estadísticas y Big Data

Siempre lucho por obtener la verdadera esencia del problema de los parámetros incidentales. Leí en varias ocasiones que los estimadores de efectos fijos de los modelos de datos de panel no lineales pueden estar severamente sesgados debido al problema de parámetro incidental "bien conocido". Cuando solicito una explicación clara de …

15 nonlinear-regression  fixed-effects-model  bias 

¿Alguien puede decirme cómo se supone que debo construir una red neuronal utilizando el método por lotes? He leído que, en el modo por lotes, para todas las muestras en el conjunto de entrenamiento, calculamos el error, los delta y, por lo tanto, los pesos delta para cada neurona en …

15 machine-learning  neural-networks 

Estoy interesado en ver varias métricas diferentes para los algoritmos de clasificación: hay algunas que figuran en la página de Wikipedia de Learning to Rank, que incluyen: • Precisión media promedio (MAP); • DCG y NDCG; • Precisión @ n, NDCG @ n, donde "@n" indica que las métricas se …

15 algorithms  ranking 

Supongamos que tenemos una respuesta Y y predictores X1, ...., Xn. Si tratamos de ajustar Y a través de un modelo lineal de X1, ..., Xn, y resulta que la verdadera relación entre Y y X1, ..., Xn no era lineal, podríamos ser capaces para arreglar el modelo transformando las …

15 machine-learning  random-forest 

Estoy tratando de entender algunos documentos de Mark van der Laan. Es estadístico teórico en Berkeley y trabaja en problemas que se superponen significativamente con el aprendizaje automático. Un problema para mí (además de las matemáticas profundas) es que a menudo termina describiendo enfoques familiares de aprendizaje automático utilizando una …

15 mathematical-statistics  estimation  nonparametric  autocorrelation  censoring 

Estoy leyendo un artículo científico sobre clasificación de imágenes. En los resultados experimentales hablan de la precisión top-1 y top-5, pero nunca he oído hablar del término, ni puedo encontrarlo usando google. ¿Alguien puede darme una definición o señalarme a algún lado? :)

15 machine-learning 

Así que tracé el ACF / PACF de los retornos de petróleo y esperaba ver una autocorrelación positiva, pero para mi sorpresa, solo obtengo una autocorrelación negativa significativa. ¿Cómo debo interpretar el gráfico anterior? Parecen indicar que existe una tendencia a que los retornos de petróleo aumenten cuando disminuyeron previamente …

15 time-series 

Digamos que tengo dos o más poblaciones de muestra de vectores de valores continuos n-dimensionales. ¿Hay alguna forma no paramétrica de probar si estas muestras son de la misma distribución? Si es así, ¿hay una función en R o python para esto?

15 r  distributions  nonparametric  python 

Al realizar la clasificación SVM lineal, a menudo es útil normalizar los datos de entrenamiento, por ejemplo restando la media y dividiendo por la desviación estándar, y luego escalar los datos de prueba con la media y la desviación estándar de los datos de entrenamiento. ¿Por qué este proceso cambia …

15 machine-learning  svm  standardization 

Supongamos que dos grupos, que comprende n1n1n_1 y n2n2n_2 cada rango de un conjunto de 25 elementos de más a menos importante. ¿Cuáles son las mejores formas de comparar estas clasificaciones? Claramente, es posible hacer 25 pruebas U de Mann-Whitney, pero esto daría como resultado 25 resultados de la prueba …

15 ranking  group-differences 

He trabajado con la información mutua por algún tiempo. Pero encontré una medida muy reciente en el "mundo de correlación" que también se puede usar para medir la independencia de distribución, la llamada "correlación de distancia" (también denominada correlación browniana): http://en.wikipedia.org/wiki/Brownian_covariance . Revisé los documentos donde se introduce esta medida, …

15 correlation  mutual-information  distance-covariance 

Recibí resultados de una prueba de rango de Mann-Whitney que no entiendo. La mediana de las 2 poblaciones es idéntica (6.9). Los cuantiles superior e inferior de cada población son: 6.64 y 7.2 6.60 y 7.1 El valor p resultante de la prueba que compara estas poblaciones es 0.007. ¿Cómo …

15 nonparametric  median  ranks  wilcoxon-mann-whitney 

Sea una variable aleatoria distribuida de chi-cuadrado con k grados de libertad. ¿Cuáles son los límites más agudos conocidos para las siguientes probabilidades?X∼χ2kX∼χk2X \sim \chi^2_kkkk P[X&gt;t]≤1−δ1(t,k)P[X&gt;t]≤1−δ1(t,k) \mathbb{P}[X > t] \leq 1 - \delta_1(t, k) y P[X&lt;z]≤1−δ2(z,k)P[X&lt;z]≤1−δ2(z,k) \mathbb{P}[X < z] \leq 1 - \delta_2(z, k) donde y δ 2 son algunas …

15 probability  chi-squared 

Me gustaría un consejo sobre un método de análisis que estoy usando, para saber si es estadísticamente correcto. He medido procesos de dos puntos y y quiero determinar si los eventos en están de alguna manera correlacionados con los eventos en .T1= t11, t12, . . . , t1norteT1=t11,t21,...,tnorte1T^1 = …

15 point-process  cross-correlation 

¿Cuál es la derivada de la función de activación ReLU definida como: ReLU(x)=max(0,x)ReLU(x)=max(0,x) \mathrm{ReLU}(x) = \mathrm{max}(0, x) ¿Qué pasa con el caso especial donde hay una discontinuidad en la función en ?x=0x=0x=0

15 self-study  neural-networks