Estadísticas y Big Data

Tengo dos series temporales S y T. tienen la misma frecuencia y la misma longitud. Me gustaría calcular (usando R), la correlación entre este par (es decir, S y T), y también poder calcular la importancia de la correlación), para poder determinar si la correlación se debe al azar o …

14 r  time-series  correlation 

Comencé a hacer Montecarlo en R como pasatiempo, pero finalmente un analista financiero me aconsejó migrar a Matlab. Soy un desarrollador de software experimentado. pero un principiante de Monte Carlo. Quiero construir modelos estáticos con análisis de sensibilidad, modelos dinámicos posteriores. Necesito buenas bibliotecas / algoritmos que me guíen. A …

14 r  matlab  monte-carlo 

Después de leer uno de los "Consejos de investigación" de RJ Hyndman sobre validación cruzada y series de tiempo, volví a una vieja pregunta mía que trataré de formular aquí. La idea es que en los problemas de clasificación o regresión, el orden de los datos no es importante y, …

14 time-series  machine-learning  cross-validation 

Estoy creando una aplicación de Android que registra los datos del acelerómetro durante el sueño, para analizar las tendencias del sueño y, opcionalmente, despertar al usuario cerca del momento deseado durante el sueño ligero. Ya he creado el componente que recopila y almacena datos, así como la alarma. Todavía necesito …

14 time-series  smoothing  signal-processing  java 

Cuando eres tú quien hace el trabajo, al darte cuenta de lo que estás haciendo, desarrollas una sensación de cuándo has ajustado demasiado el modelo. Por un lado, puede seguir la tendencia o el deterioro en el cuadrado R ajustado del modelo. También puede realizar un seguimiento de un deterioro …

14 regression  multivariate-analysis  overfitting 

Estoy buscando el marco teórico apropiado o la especialidad que me ayude a tratar de entender cómo lidiar con los errores que tiene el sistema GPS, especialmente cuando se trata de rutas. Básicamente, estoy buscando los requisitos sobre los datos y cualquier algoritmo que pueda usar para poder establecer la …

14 error  sampling 

Bloqueado . Esta pregunta y sus respuestas están bloqueadas porque la pregunta está fuera de tema pero tiene un significado histórico. Actualmente no acepta nuevas respuestas o interacciones. La pirámide de edad se ve así: me gustaría hacer algo similar, a saber, 2 gráficos de barras (no histogramas) con las …

14 r  data-visualization 

La suma, resta, multiplicación y división de variables aleatorias normales están bien definidas, pero ¿qué pasa con las operaciones trigonométricas? Por ejemplo, supongamos que estoy tratando de encontrar el ángulo de una cuña triangular (modelada como un triángulo rectángulo) con los dos catheti que tienen dimensiones y d 2d1d1d_1d2d2d_2 , …

14 distributions  normal-distribution  circular-statistics  saddlepoint-approximation 

¿Existe una técnica de modelado como LOESS que permita cero, una o más discontinuidades, donde el momento de las discontinuidades no se conoce a priori? Si existe una técnica, ¿existe una implementación existente en R?

14 r  regression  curve-fitting  change-point  loess 

Estoy aplicando un algoritmo de bosque aleatorio como clasificador en un conjunto de datos de microarrays que se dividen en dos grupos conocidos con miles de características. Después de la ejecución inicial, miro la importancia de las características y ejecuto nuevamente el algoritmo del árbol con las 5, 10 y …

14 r  machine-learning  classification  random-forest 

Estoy buscando un R paquete para estimar los coeficientes de los modelos logit con efecto fijo individual (intercepción individual) usando el estimador de 1980 de Chamberlain. A menudo se le conoce como estimador logit de efecto fijo de Chamberlain. Es un estimador clásico cuando se trata de datos de panel …

14 r  logistic  panel-data  clogit 

Un colega de mi oficina me dijo hoy: "Los modelos de árbol no son buenos porque quedan atrapados por observaciones extremas". Una búsqueda aquí resultó en este hilo que básicamente respalda el reclamo. Lo que me lleva a la pregunta: ¿bajo qué situación puede ser robusto un modelo CART y …

14 regression  classification  robust  cart 

Como alguien que necesita conocimiento estadístico pero no es un estadístico formalmente capacitado, me sería útil tener un diagrama de flujo (o algún tipo de árbol de decisión) para ayudarme a elegir el enfoque correcto para resolver un problema en particular (por ejemplo, " ¿necesita esto y sabe eso y …

14 hypothesis-testing  data-mining  eda 

Estaba mirando esta páginay noté los métodos para intervalos de confianza para lme ​​y lmer en R. Para aquellos que no conocen R, esas son funciones para generar efectos mixtos o modelos de niveles múltiples. Si tengo efectos fijos en algo así como un diseño de medidas repetidas, ¿qué significaría …

14 r  confidence-interval  mixed-model  repeated-measures  sas 

Bloqueado . Esta pregunta y sus respuestas están bloqueadas porque la pregunta está fuera de tema pero tiene un significado histórico. Actualmente no acepta nuevas respuestas o interacciones. Quiero agrupar ~ 22000 puntos. Muchos algoritmos de agrupamiento funcionan mejor con conjeturas iniciales de mayor calidad. ¿Qué herramientas existen que me …

14 data-visualization  clustering  software