Preguntas etiquetadas con ab-test

Acabo de encontrar este artículo , que describe cómo calcular la repetibilidad (también conocida como confiabilidad, también conocida como correlación intraclase) de una medición a través del modelado de efectos mixtos. El código R sería: #fit the model fit = lmer(dv~(1|unit),data=my_data) #obtain the variance estimates vc = VarCorr(fit) residual_var = …

28 mixed-model  reliability  intraclass-correlation  repeatability  spss  factor-analysis  survey  modeling  cross-validation  error  curve-fitting  mediation  correlation  clustering  sampling  machine-learning  probability  classification  metric  r  project-management  optimization  svm  python  dataset  quality-control  checking  clustering  distributions  anova  factor-analysis  exponential  poisson-distribution  generalized-linear-model  deviance  machine-learning  k-nearest-neighbour  r  hypothesis-testing  t-test  r  variance  levenes-test  bayesian  software  bayesian-network  regression  repeated-measures  least-squares  change-scores  variance  chi-squared  variance  nonlinear-regression  regression-coefficients  multiple-comparisons  p-value  r  statistical-significance  excel  sampling  sample  r  distributions  interpretation  goodness-of-fit  normality-assumption  probability  self-study  distributions  references  theory  time-series  clustering  econometrics  binomial  hypothesis-testing  variance  t-test  paired-comparisons  statistical-significance  ab-test  r  references  hypothesis-testing  t-test  normality-assumption  wilcoxon-mann-whitney  central-limit-theorem  t-test  data-visualization  interactive-visualization  goodness-of-fit 

Soy un ingeniero de software que busca construir una herramienta de prueba A / B. No tengo antecedentes sólidos de estadísticas, pero he estado leyendo bastante en los últimos días. Estoy siguiendo la metodología descrita aquí y resumiré los puntos relevantes a continuación. La herramienta permitirá a los diseñadores y …

22 hypothesis-testing  statistical-significance  proportion  ab-test 

Soy un desarrollador de software que trabaja en sistemas de prueba A / B. No tengo antecedentes sólidos de estadísticas, pero he estado adquiriendo conocimientos en los últimos meses. Un escenario de prueba típico implica comparar dos URL en un sitio web. Un visitante visita LANDING_URLy luego se reenvía al …

18 power-analysis  ab-test  sequential-analysis  optimal-stopping 

Estoy a cargo de presentar los resultados de las pruebas A / B (ejecutadas en variaciones del sitio web) en mi empresa. Ejecutamos la prueba durante un mes y luego verificamos los valores p a intervalos regulares hasta que alcancemos la significación (o la abandonamos si no se alcanza la …

13 hypothesis-testing  statistical-significance  bias  ab-test  optimal-stopping 

Tenemos dos cohortes de 1000 muestras cada una. Medimos 2 cantidades en cada cohorte. El primero es una variable binaria. El segundo es un número real que sigue una distribución de cola pesada. Queremos evaluar qué cohorte funciona mejor para cada métrica. Hay muchas pruebas estadísticas para elegir: las personas …

12 ab-test 

El otro día, un seminario web realizado por una compañía de pruebas a / b hizo que su "Científico de datos" residente explicara que debe validar sus resultados volviendo a ejecutar el experimento. La premisa era que, si selecciona un 95% de confianza, hay un 5% (1/20) de probabilidad de …

11 probability  hypothesis-testing  statistical-significance  ab-test 

Estoy usando la fórmula de la prueba ab bayesiana para calcular los resultados de la prueba AB utilizando la metodología bayesiana. Pr ( psi> pUNA) = ∑i = 0αsi- 1B ( αUNA+ i , βsi+ βUNA)( βsi+ i ) B ( 1 + i , βsi) B ( αUNA, βUNA)Pr(pB>pA)=∑i=0αB−1B(αA+i,βB+βA)(βB+i)B(1+i,βB)B(αA,βA) …

10 r  bayesian  ab-test 

Estoy ejecutando una prueba AB en una página que recibe solo 5k visitas por mes. Tomaría demasiado tiempo alcanzar los niveles de tráfico necesarios para medir una diferencia de + -1% entre la prueba y el control. He oído que puedo usar las estadísticas bayesianas para darme una buena oportunidad …

9 bayesian  hypothesis-testing  ab-test 

... (opcional) en el contexto de Google Web Optimizer. Suponga que tiene dos grupos y una variable de respuesta binaria. Ahora obtienes el siguiente resultado: Original : 401 ensayos, 125 ensayos exitosos Combinación16 : 441 ensayos, 141 ensayos exitosos La diferencia no es estadísticamente significativa, sin embargo, se puede calcular …

8 bayesian  ab-test 

Antecedentes: Mi software solicita a los usuarios donaciones opcionales de cualquier cantidad. Dividí las solicitudes de donación de prueba entre los usuarios para encontrar la mejor manera de preguntar: 50% obtiene la versión 1 de la solicitud, 50% obtiene la versión 2 de la solicitud, y vemos cuál funciona mejor. …

8 r  p-value  wilcoxon-mann-whitney  permutation-test  ab-test 

Estoy tratando de entender la diferencia entre prueba de la hipótesis nula (es decir, prueba de que la probabilidad de un "objetivo" es la misma en 2 poblaciones diferentes, similar a la prueba de prop. en R) Una prueba A / B utilizando una fórmula bayesiana como la que se …

8 hypothesis-testing  bayesian  proportion  ab-test 

El G-Test es una forma de obtener estimaciones rápidas de una distribución chi cuadrado, y es recomendado por el autor de este conocido tutorial prueba A / B . Esta herramienta asume una distribución normal y utiliza la diferencia de medios para calcular la confianza. ¿Cuál es la diferencia entre …

8 confidence-interval  ab-test 

Estoy buscando recursos teóricos (libros, tutoriales, etc.) para aprender a hacer inferencias estadísticas sólidas dadas (un montón) de datos de conversión de sitios web multivariados. Estoy detrás de las matemáticas involucradas, y no puedo encontrar nada bueno que no sea de marketing en la web. El tipo de preguntas que …

8 multivariate-analysis  references  optimization  ab-test  web 

Cerrado. Esta pregunta está fuera de tema . Actualmente no está aceptando respuestas. ¿Quieres mejorar esta pregunta? Actualice la pregunta para que esté en el tema de Cross Validated. Cerrado hace 8 meses . Prueba A / B: http://20bits.com/articles/statistical-analysis-and-ab-testing/ http://elem.com/~btilly/effective-ab-testing/ No estoy muy familiarizado con las pruebas A / B, …

8 r  python  ab-test