Estadísticas y Big Data

Para analizar los datos de un experimento de biofísica, actualmente estoy tratando de hacer un ajuste de curva con un modelo altamente no lineal. La función del modelo se ve básicamente como: y=ax+bx−1/2y=ax+bx−1/2y = ax + bx^{-1/2} Aquí, especialmente el valor de bbb es de gran interés. Una trama para …

12 curve-fitting  nonlinear 

Estoy familiarizado con la notación como: yij=β0+βixij+uj+eij=β0j+βixij+eijyij=β0+βixij+uj+eij=β0j+βixij+eij\begin{align} y_{ij} &= \beta_0 + \beta_i x_{ij} + u_j + e_{ij}\\ &= \beta_{0j} + \beta_i x_{ij} + e_{ij} \end{align} where , yβ0j=β0+ujβ0j=β0+uj\beta_{0j}=\beta_{0}+u_j yij=β0+β1xij+u0j+u1jxij+eij=β0j+β1jxij+eijyij=β0+β1xij+u0j+u1jxij+eij=β0j+β1jxij+eij\begin{align} y_{ij} &= \beta_0 + \beta_1 x_{ij} + u_{0j} + u_{1j} x_{ij} + e_{ij} \\ &= \beta_{0j} + \beta_{1j} x_{ij} + e_{ij} …

12 mixed-model  mathematical-statistics 

El tenis tiene un peculiar sistema de puntuación de tres niveles, y me pregunto si esto tiene algún beneficio estadístico, desde el punto de vista de un partido como un experimento para determinar el mejor jugador. Para aquellos que no están familiarizados, en las reglas normales, un juego se gana …

12 probability  inference  games 

Dado el mismo conjunto de covariables y familia de distribución, ¿cómo puedo comparar modelos con diferentes funciones de enlace? Creo que la respuesta correcta aquí es "AIC / BIC", pero no estoy 100% seguro. ¿Es posible tener modelos anidados si tienen un enlace diferente?

12 generalized-linear-model  aic  link-function 

Tengo dos variables aleatorias e .X>0X>0X > 0Y>0Y>0Y > 0 Dado que puedo estimar ¿cómo puedo estimarCov(X,Y),Cov(X,Y),\text{Cov}(X, Y),Cov(log(X),log(Y))?Cov(log⁡(X),log⁡(Y))?\text{Cov}(\log(X), \log(Y))?

12 data-transformation  covariance  random-variable 

Estoy trabajando en un problema clásico de predicción de abandono utilizando la cantidad de visitas de un usuario determinado a un sitio y pensé que la Regresión de Poisson era la herramienta adecuada para modelar el compromiso futuro de ese usuario. Cuando me encontré con un libro sobre análisis de …

12 survival  hazard  poisson-process 

Tengo un conjunto de datos que está aumentando claramente a medida que pasa el tiempo (tipo de cambio de una moneda, datos mensuales durante 20 años), mi pregunta es: ¿puedo eliminar la tendencia de los datos y luego diferenciarlos también para hacerlos estacionarios, si la tendencia en sí misma no …

12 time-series  stationarity 

La correlación, , es una medida de asociación lineal entre dos variables. El coeficiente de determinación, , es una medida de cuánto de la variabilidad en una variable puede "explicarse por" la variación en la otra.r 2rrrr2r2r^2 Por ejemplo, si es la correlación entre dos variables, entonces . Por lo …

12 regression  correlation  r-squared 

Quiero comparar dos métodos diferentes para detectar el cambio de estado en un análisis de supervivencia. Se sigue a un grupo de sujetos durante un período más largo (muchos años), y se han utilizado dos métodos de examen para examinar si se ha producido un cambio de estado; Se utilizó …

12 survival  paired-data 

Tengo un pequeño problema con la sintaxis de Stata. Necesito hacer la siguiente regresión: y= a x + b z+ c ( x z) + ey=ax+bz+c(xz)+ey = ax + bz + c(xz) + e donde tanto como z están instrumentados y también el término de interacción x z utiliza los …

12 stata  interaction  instrumental-variables 

¿Tengo problemas para entender estadísticas suficientes y completas? Sea una estadística suficiente.T= Σ xyoT=ΣxiT=\Sigma x_i Si con probabilidad 1, para alguna función g , entonces es una estadística completa suficiente.E[g(T)]=0E[g(T)]=0E[g(T)]=0ggg Pero ¿qué significa esto? He visto ejemplos de uniformes y Bernoulli (página 6 http://amath.colorado.edu/courses/4520/2011fall/HandOuts/umvue.pdf ), pero no es intuitivo, me …

12 self-study  estimation  intuition  decision-theory 

Acabo de encontrar este gran análisis que es interesante y hermoso visualmente: http://www.nytimes.com/interactive/2012/11/02/us/politics/paths-to-the-white-house.html Tengo curiosidad por saber cómo se puede construir un "árbol de ruta" con R. ¿Qué datos y algoritmos se necesitan para construir un árbol de ruta? Gracias.

12 r  data-visualization  politics 

Estoy tratando de obtener una intuición de por qué aumentar el número de funciones podría reducir el rendimiento. Actualmente estoy usando un clasificador LDA que funciona mejor de manera bivariante entre ciertas funciones, pero peor al mirar más funciones. Mi precisión de clasificación se realiza utilizando un xval estratificado de …

12 classification  feature-selection 

Usé stl () en R para descomponer los datos de conteo en componentes de tendencia, estacionales e irregulares. Los valores de tendencia resultantes ya no son enteros. Tengo las siguientes preguntas: ¿Es stl () una forma adecuada de desestacionalizar los datos de conteo? Dado que la tendencia resultante ya no …

12 r  time-series  poisson-distribution 

En una regresión logística solo con términos lineales y cuadráticos, si tengo un coeficiente lineal y un coeficiente cuadrático , ¿puedo decir que hay un punto de inflexión de la probabilidad en ?β 2 - β 1 / ( 2 β 2 )β1β1\beta_1β2β2\beta_2−β1/(2β2)−β1/(2β2)-\beta_1 / (2\beta_2)

12 interpretation  logit  polynomial