Preguntas etiquetadas con regression

Estoy leyendo Thinking, Fast and Slow de Daniel Kahneman y me encontré con el siguiente texto Hace algunos años tuve una oportunidad inusual de examinar de cerca la ilusión de la habilidad financiera. Me habían invitado a hablar con un grupo de asesores de inversiones en una empresa que brindaba …

9 regression  time-series  correlation 

Tengo un modelo de regresión simple ( y = param1 * x1 + param2 * x2 ). Cuando ajusto el modelo a mis datos, encuentro dos buenas soluciones: La solución A, params = (2,7), es mejor en el conjunto de entrenamiento con RMSE = 2.5 ¡PERO! Solución B params = …

9 regression  cross-validation  overfitting  sensitivity-analysis 

Hola, estoy estudiando técnicas de regresión. Mis datos tienen 15 características y 60 millones de ejemplos (tarea de regresión). Cuando probé muchas técnicas de regresión conocidas (árbol impulsado por gradiente, regresión de árbol de decisión, AdaBoostRegressor, etc.), la regresión lineal funcionó muy bien. Anotó casi mejor entre esos algoritmos. ¿Cuál …

9 regression  modeling  deep-learning  model  cart 

Sé que el anterior de Zellner está utilizando datos para establecer información previa, pero en realidad todo el modelo depende de los datos. ¿Hay alguna otra razon?

9 regression  bayesian  uninformative-prior 

A pesar de las similitudes básicas como ambos modelos, la probabilidad de éxito en lugar de modelar la variable de respuesta directamente; Creo que hay respuestas más confiables que señalan las diferencias y similitudes entre estos modelos. Una diferencia es que, en logística, se puede usar un tipo diferente y …

9 regression  logistic  mathematical-statistics  irt 

Actualmente estoy estudiando sobre Regresión logística. Pero me estoy en el cálculo de la intercepción ( ) y el coeficiente ( ). Lo he estado buscando a través de Internet, pero solo obtengo tutoriales usando Microsoft Excel o funciones integradas en R. Escuché que se puede resolver con Maximum Likelihood, …

9 regression  machine-learning  logistic  maximum-likelihood 

Dados dos conjuntos de datos multidimensionales, e , algunas personas realizan análisis multivariables mediante la construcción de una variable dependiente sustituta mediante el análisis de componentes principales (PCA). Es decir, ejecute PCA en el conjunto , tome puntajes a lo largo del primer componente , y ejecute una regresión múltiple …

9 regression  multiple-regression  pca  canonical-correlation 

Considera la función r(x)=E(Y∣X=x)r(X)=mi(Y∣X=X) r(x) = \mathbb{E}(Y \mid X = x) Esto se ha llamado la función de regresión en un libro de texto que estoy usando. Estoy tratando de descubrir la relación entre esta función y el modelo clásico de regresión lineal. Entonces, sé que es un teorema * …

9 regression  linear-model 

Supongamos que tengo una muestra aleatoria .{Xnorte,ynorte}norten = 1{xn,yn}n=1N\lbrace x_n ,y_n \rbrace_{n=1}^N Supongamos queynorte=β0 0+β1Xnorte+εnorteyn=β0+β1xn+εny_n = \beta_0 + \beta_1 x_n + \varepsilon_n yy^norte=β^0 0+β^1Xnortey^n=β^0+β^1xn\hat{y}_n = \hat{\beta}_0 +\hat{\beta}_1 x_n ¿Cuál es la diferencia entre y ?β1β1\beta_1β^1β^1\hat{\beta}_1

9 regression 

En su artículo seminal 'Regresión de ángulo mínimo' , Efron et al describen una modificación simple del algoritmo LARS que permite calcular las rutas completas de regularización de LASSO. He implementado esta variante con éxito y, por lo general, trazo la ruta de salida en comparación con el número de …

9 regression  lasso  regularization  lars 

Hay varias preguntas que hablan de los méritos relativos de varios métodos para evaluar la importancia de los predictores de regresión, por ejemplo, este . Noté que en este comentario @gung se refiere a la práctica como una "idea equivocada", vinculando a esta respuesta en apoyo de esta afirmación. El …

9 regression  standardization 

Mi colega y yo estamos tratando de entender la diferencia entre la regresión logística y un SVM. Claramente están optimizando diferentes funciones objetivas. ¿Es un SVM tan simple como decir que es un clasificador discriminatorio que simplemente optimiza la pérdida de la bisagra? ¿O es más complejo que eso? ¿Cómo …

9 regression  logistic  svm  max-margin 

Observé que la función lazo en MATLAB es relativamente lenta. Corro muchos problemas de regresión, con típicamente 1 a 100 predictores y 200 a 500 observaciones. En algunos casos, el lazo resultó ser extremadamente lento (para resolver un problema de regresión, tomó varios minutos). Descubrí que este era el caso …

9 regression  feature-selection  regularization 

Estoy un poco desconcertado por una fórmula presentada en "Introducción al aprendizaje estadístico" de Hastie. En el Capítulo 6, página 212 (sexta impresión, disponible aquí ), se indica que: Un yoC=R SSnorteσ^2+2 dnorteAIC=RSSnσ^2+2dnAIC = \frac{RSS}{n\hat\sigma^2} + \frac{2d}{n} Para modelos lineales con ruido gaussiano, es el número de predictores y es …

9 regression  machine-learning  aic 

Estoy buscando una explicación 1) mecánica y 2) intuitiva de cómo se determinan los efectos de las variables individuales manteniendo constantes otras variables. En un ejemplo que usa datos de encuestas, ¿qué significa exactamente decir: "Con edad, sexo e ingresos constantes, el efecto de la educación es ___" Tengo entendido …

9 regression  interpretation