¿Deberíamos enseñar curtosis en un curso de estadística aplicada? ¿Si es así, cómo?


17

La tendencia central, la propagación y la asimetría pueden definirse relativamente bien, al menos de manera intuitiva; Las medidas matemáticas estándar de estas cosas también corresponden relativamente bien a nuestras nociones intuitivas. Pero la curtosis parece ser diferente. Es muy confuso y no coincide bien con ninguna intuición sobre la forma de distribución.

Una explicación típica de la curtosis en un entorno aplicado sería este extracto de las estadísticas aplicadas para negocios y administración usando Microsoft Excel [ 1 ] :[1]

La curtosis se refiere a cuán alta es una distribución o, por el contrario, qué tan plana es. Si hay más valores de datos en las colas, de lo que espera de una distribución normal, la curtosis es positiva. Por el contrario, si hay menos valores de datos en las colas, de lo que cabría esperar en una distribución normal, la curtosis es negativa. Excel no puede calcular esta estadística a menos que tenga al menos cuatro valores de datos.

Además de la confusión entre "curtosis" y "curtosis excesiva" (como en este libro, es común usar la primera palabra para referirse a lo que otros autores llaman la segunda), la interpretación en términos de "pico" o "planitud" luego se confunde con el cambio de atención a cuántos elementos de datos hay en las colas. Teniendo en cuenta tanto "pico" y "colas" es necesario - Kaplansky [ 2 ][2]se quejó en 1945 de que muchos libros de texto de la época afirmaban erróneamente que la curtosis tenía que ver con qué tan alto se compara el pico de la distribución con el de una distribución normal, sin considerar las colas. Pero claramente tener que considerar la forma tanto en el pico como en las colas hace que la intuición sea más difícil de comprender, un punto que el extracto citado anteriormente omite al pasar del pico a la pesadez de las colas como si estos conceptos fueran los mismos.

Además, esta explicación clásica de "cumbres y colas" de la curtosis solo funciona bien para distribuciones simétricas y unimodales (de hecho, los ejemplos ilustrados en ese texto son todos simétricos). Sin embargo, la forma general "correcta" de interpretar la curtosis, ya sea en términos de "picos", "colas" u "hombros", ha sido discutida durante décadas . [ 2 ] [ 3 ] [ 4 ] [ 5 ] [ 6 ][2][3][4][5][6]

¿Existe una forma intuitiva de enseñar curtosis en un entorno aplicado que no golpee contradicciones o contraejemplos cuando se adopta un enfoque más riguroso? ¿Es la curtosis incluso un concepto útil en el contexto de este tipo de cursos de análisis de datos aplicados, a diferencia de las clases de estadística matemática? Si el "pico" de una distribución es un concepto intuitivamente útil, ¿deberíamos enseñarlo a través de L-moments [ 7 ] en su lugar?[7]

Herkenhoff, L. y Fogli, J. (2013). Estadística aplicada para negocios y administración usando Microsoft Excel. Nueva York, NY: Springer.[1]

Kaplansky, I. (1945). "Un error común con respecto a la curtosis". Revista de la Asociación Americana de Estadística,40(230): 259.[2]

Darlington, Richard B (1970). "¿Es la curtosis realmente 'pico'?". El estadístico estadounidense24(2): 19–22[3]

Moros, JJA. (1986) "El significado de la curtosis: Darlington reexaminado". El estadístico estadounidense40(4): 283–284[4]

Balanda, Kevin P. y MacGillivray, HL (1988). "Kurtosis: una revisión crítica". El estadístico estadounidense 42(2): 111–119[5]

DeCarlo, LT (1997). "Sobre el significado y uso de la curtosis". Métodos psicológicos,2(3), 292. Chicago[6]

Hosking, JRM (1992). "¿Momentos o momentos L? Un ejemplo que compara dos medidas de forma distributiva". El estadístico estadounidense46(3): 186-189[7]


2
¿Qué quieres decir con los planes de estudio habituales? Es decir, qué nivel de educación.
Gumeo

55
¿Qué estás enseñando exactamente sobre la curtosis? Esta pregunta es bastante vaga como es. Complete ahora cómo encaja en su plan de estudios y quizás algunos ejemplos intuitivos de las medidas estándar con las que está de acuerdo se contradicen en la curtosis.
John

3
No creo que la medida del momento de la curtosis sea realmente muy diferente de la asimetría del momento a ese respecto. En ambos casos, en realidad no reflejan lo que la gente piensa que hacen, y ambos son menos intuitivos que las historias que las personas se cuentan sobre ellos. Por cada contraejemplo sorprendente que tengo sobre curtosis, tengo otro sobre asimetría. No eliminaría ninguno de ellos, pero reduciría el énfasis en las medidas de momento, las movería más tarde y cambiaría la forma en que se enseñan, para que no combinemos diferentes conceptos y no lo hagamos. hacer afirmaciones que no se sostienen.
Glen_b -Reinstate Monica

3
Un sesgo más alto no implica una cola más pesada en la dirección del sesgo. La asimetría cero no significa simetría (todos los momentos impares cero ni siquiera implica simetría). La simetría ni siquiera implica asimetría cero. ¿Qué intuiciones quedan?
Glen_b -Reinstate Monica

3
Aquí hay otra respuesta con alguna discusión que tiene una clase interesante de ejemplos. Hay algunos otros pero no los veo en este momento. Algunas de las publicaciones de whuber también son útiles.
Glen_b -Reinstate Monica

Respuestas:


18

La curtosis es realmente bastante simple ... y útil. Es simplemente una medida de valores atípicos, o colas. No tiene nada que ver con el pico, esa definición debe ser abandonada.

Aquí hay un conjunto de datos:
0, 3, 4, 1, 2, 3, 0, 2, 1, 3, 2, 0, 2, 2, 3, 2, 5, 2, 3, 999

Tenga en cuenta que '999' es un valor atípico.

Aquí están los valores 4 del conjunto de datos:z4

0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00,0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 0.00, 360.98

Tenga en cuenta que solo el valor atípico da un z4 que es notablemente diferente de 0.

El promedio de estos valores de 4 es la curtosis de la distribución empírica (reste 3 si lo desea, no importa para el punto que estoy haciendo): 18.05z4

Debería ser obvio a partir de este cálculo que los datos cerca del "pico" (los datos no atípicos) no contribuyen casi nada a la estadística de curtosis.

La curtosis es útil como medida de valores atípicos. Los valores atípicos son importantes para los estudiantes de primaria y, por lo tanto, se debe enseñar la curtosis. Pero la curtosis prácticamente no tiene nada que ver con el pico, ya sea puntiagudo, plano, bimodal o infinito. Puede tener todo lo anterior con curtosis pequeña y todo lo anterior con curtosis grande. Entonces debería NUNCA debe presentarse como algo que tenga que ver con el pico, porque eso enseñará información incorrecta. También hace que el material sea innecesariamente confuso y aparentemente menos útil.

Resumen:

  1. La curtosis es útil como medida de colas (valores atípicos).
  2. La curtosis no tiene nada que ver con el pico.
  3. La curtosis es prácticamente útil y debe enseñarse, pero solo como una medida de valores atípicos. No mencione pico cuando enseñe curtosis.

Este artículo explica claramente por qué la definición de "pico" ahora está oficialmente muerta.

Westfall, PH (2014). " Kurtosis como pico, 1905 - 2014. RIP " The American Statistician , 68 (3), 191-195.


44
Bienvenido a CV, ¡espero que te quedes y contribuyas más en el futuro! He editado su publicación para incluir un enlace al documento y he formateado algunas de las anotaciones matemáticas, espero que no le importe. (Al colocar las matemáticas en un $ejemplo $z^4$, es posible usar )LATEX
Silverfish

6

Si bien la pregunta es algo vaga, es interesante. ¿A qué niveles se enseña la curtosis? Recuerdo que se mencionó en un curso (nivel de maestría) en modelos lineales (hace mucho tiempo, basado en la primera edición del libro de Seber). No era un tema importante, pero entra en temas como el estudio de la (falta de) robustez de la prueba de razón de probabilidad (prueba F) de igualdad de varianzas, donde (desde la memoria) el nivel correcto asintóticamente depende de tener la misma curtosis que la distribución normal, que es demasiado para suponer! Vimos un documento (pero nunca lo leí con detalles) http://www.jstor.org/stable/4615828?seq=1#page_scan_tab_contents por Oja, que trata de averiguar qué asimetría, curtosis y tales medidas realmente.

¿Por qué me parece interesante? Porque he estado enseñando en América Latina, donde parece que la asimetría y la curtosis son enseñadas por muchos como temas importantes, y tratando de decirles a los estudiantes de postgrado (muchos de economía) que la curtosis es una mala medida de la forma de distribución (principalmente porque la variabilidad del muestreo de las cuarta potencias simplemente es demasiado grande), fue difícil. Intenté hacer que usaran QQplots en su lugar. Entonces, para algunos de los comentaristas, sí, ¡esto se enseña en algunos lugares, probablemente demasiado!

Por cierto, esta no es solo mi opinión. La siguiente publicación de blog https://www.spcforexcel.com/knowledge/basic-statistics/are-skewness-and-kurtosis-useful-statistics contiene esta cita (atribuida al Dr. Wheeler):

En resumen, la asimetría y la curtosis son prácticamente inútiles. Shewhart hizo esta observación en su primer libro. Las estadísticas de asimetría y curtosis simplemente no proporcionan información útil más allá de la que ya proporcionan las medidas de ubicación y dispersión.

¡Deberíamos enseñar mejores técnicas para estudiar formas de distribuciones! tales como QQplots (o gráficos de distribución relativa). Y, si alguien todavía necesita medidas numéricas, las medidas basadas en momentos L son mejores. Citaré un pasaje del artículo JR Statist Soc B (1990) 52, No 1, pp 105-124 de JRM Hosking: "Momentos L: análisis y estimación de la distribución utilizando la combinación lineal de estadísticas de pedidos", página 109:

λ1λ2μ(F)12σ1(F)τ3τ4

(Por el momento, me refiero al documento para las definiciones de estas medidas, todas están basadas en momentos L). Lo interesante es que, la medida tradicional de curtosis, basada en cuartos momentos, no es una medida de curtosis en el sentido de Oja! (Lo editaré en referencias para ese reclamo cuando pueda encontrarlo).


1
No hay problema con el uso de técnicas gráficas y de otro tipo para comprender las propiedades de distribución, pero la afirmación de que "la asimetría y la curtosis son prácticamente inútiles" es una hipérbole. Ambos tienen grandes efectos en todo tipo de inferencia estadística.
Peter Westfall

@Peter Probablemente significaba "curtosis empírica" ​​en esa declaración.
kjetil b halvorsen

1
Aun así, la curtosis empírica le indica cuándo tiene un problema atípico en sus datos. Así que todavía pienso que el comentario "la asimetría y la curtosis son prácticamente inútiles" es una hipérbole. Claro, puede que no sean excelentes estimaciones de los parámetros de "población", especialmente con tamaños de muestra más pequeños, pero "prácticamente sin valor" es un tramo. Incluso si no estiman los parámetros de la población particularmente bien, aún proporcionan información descriptiva útil sobre el conjunto de datos existente. Información que, por supuesto, debe complementarse con vistas gráficas como las parcelas qq.
Peter Westfall

@Peter Westfall: ¿La verdadera Q es tal vez si la curtosis empírica es la mejor medida para detectar problemas atípicos o si hay algo mejor?
kjetil b halvorsen

La curtosis empírica mide el carácter atípico de un conjunto de datos, no los valores atípicos individuales. No iría tan lejos como para decir que curtosis = 3 (como normal) significa "sin valores atípicos", pero diría que tal caso significa que el carácter atípico (medido por el valor z promedio, cada uno llevado al cuarto potencia) es similar a la de una distribución normal. Por otro lado, una curtosis enorme ciertamente indica un problema atípico. Sí, las parcelas qq normales son mejores para un diagnóstico más refinado. Por cierto, la gráfica qq normal y el exceso de curtosis tienen una conexión matemática firme.
Peter Westfall

3

En mi opinión, el coeficiente de asimetría es útil para motivar los términos: sesgo positivo y sesgo negativo. Pero, ahí es donde se detiene, si su objetivo es evaluar la normalidad. Las medidas clásicas de asimetría y curtosis a menudo no logran capturar varios tipos de desviación lejos de la normalidad. Por lo general, recomiendo a mis alumnos que utilicen técnicas gráficas para evaluar que es razonable evaluar la normalidad, como una gráfica qq o una gráfica de probabilidad normal. También con una muestra de tamaño adecuado, también se puede usar un histograma. Los diagramas de caja también son útiles para identificar valores atípicos o incluso colas pesadas.

Esto está en línea con las recomendaciones de un grupo de trabajo de 1999 de la APA:

" Suposiciones. Debe realizar esfuerzos para garantizar que los supuestos subyacentes necesarios para el análisis sean razonables dados los datos. Examine los residuos con cuidado. No utilice pruebas de distribución e índices estadísticos de forma (por ejemplo, asimetría, curtosis) como un sustituto para examinar gráficamente sus residuos. El uso de una prueba estadística para diagnosticar problemas en el ajuste del modelo tiene varias deficiencias. Primero, las pruebas de significación diagnóstica basadas en estadísticas resumidas (como las pruebas de homogeneidad de varianza) a menudo son poco sensibles; nuestras pruebas estadísticas de modelos son a menudo más robustas que nuestras pruebas estadísticas de supuestos. En segundo lugar, las estadísticas como la asimetría y la curtosis a menudo no pueden detectar irregularidades distributivas en los residuos. Tercero, las pruebas estadísticas dependen del tamaño de la muestra y, a medida que aumenta el tamaño de la muestra, Las pruebas a menudo rechazarán suposiciones inocuas. En general, no hay sustituto para el análisis gráfico de supuestos."

Referencia: Wilkinson, L., y Task Force sobre Inferencia Estadística. (1999) Métodos estadísticos en revistas de psicología: directrices y explicaciones. Psicólogo estadounidense, 54, 594-604.


1

Dependiendo de cómo se aplique el curso, puede surgir la cuestión de la precisión de las estimaciones. La precisión de la estimación de la varianza depende en gran medida de la curtosis. La razón por la que esto sucede es que con una curtosis alta, la distribución permite datos raros, extremos y potencialmente observables. Por lo tanto, el proceso de generación de datos producirá valores muy extremos en algunas muestras, y valores no tan extremos en otras. En el primer caso, obtienes una estimación de varianza muy grande, y en el segundo, una estimación de varianza pequeña.

Si se eliminara la interpretación anticuada e incorrecta de los "niveles máximos", y se prestara la atención por completo a los valores atípicos (es decir, observables raros y extremos), entonces sería más fácil enseñar curtosis en cursos introductorios. Pero las personas se tuercen en nudos tratando de justificar el "pico" porque se dice (incorrectamente) de esa manera en sus libros de texto, y extrañan las aplicaciones reales de la curtosis. Estas aplicaciones se refieren principalmente a valores atípicos y, por supuesto, los valores atípicos son importantes en los cursos de estadística aplicada.


1
¿Eres el mismo Peter Westfall que el autor de la respuesta más votada en este hilo? Si es así, podría fusionar sus perfiles y luego editar directamente su respuesta anterior en lugar de publicar otra respuesta.
ameba dice Reinstate Monica

1
Sí, perdón por perderse la netiqueta.
Peter Westfall

-1

Francamente, no entiendo por qué la gente quiere complicar las cosas simples. ¿Por qué no solo mostrar la definición (robada de Wikipedia ):

Kurt[X]=mi[(X-μσ)4 4]=μ4 4σ4 4=mi[(X-μ)4 4](mi[(X-μ)2])2,

Puede reemplazar el operador de expectativa con estimadores basados ​​en suma 1norteyo=1norte, por supuesto. Ayuda a discutir las unidades de medida deμ,σ2,μ4 4, y muestre por qué el cuarto momento debe ser escalado por el cuadrado de la varianza para hacer que la curtosis sea la medida adimensional, es decir, un parámetro de forma. Entonces, ahora tenemos ubicaciónμescala σ2y cualquier número de parámetros para describir la forma, como sesgo y curtosis. Siempre comenzaría con ecuaciones. Supuestamente, las explicaciones fáciles de entender en inglés simple solo hacen que todo sea más confuso. Verbosidad claridad.


1
El problema es que, una vez que tienes la curtosis, no es muy intuitivo lo que (si es que hay algo) significa. No coincide con las cualidades útiles de la distribución.
Peter Flom - Restablece a Monica

Sí, la curtosis coincide con una calidad muy útil de una distribución: es una medida del peso de la cola (valores atípicos). Teoremas matemáticos de apoyo, para los cuales no hay contraejemplo: (i) la curtosis está entre E (Z ^ 4 * I (| Z |> 1)) y E (Z ^ 4 * I (| Z |> 1)) + 1 , para todas las distribuciones que tienen finito cuarto momento. (ii) para la subclase de distribuciones continuas donde la densidad de Z ^ 2 está disminuyendo en (0,1), la curtosis está entre E (Z ^ 4 * I (| Z |> 1)) y E (Z ^ 4 * I (| Z |> 1)) + .5, y (iii) para cualquier secuencia de distribuciones con curtosis tendiente al infinito, E (Z ^ 4 * I (| Z |> b)) / curtosis -> 1, para todo real b.
Peter Westfall
Al usar nuestro sitio, usted reconoce que ha leído y comprende nuestra Política de Cookies y Política de Privacidad.
Licensed under cc by-sa 3.0 with attribution required.