Tema 7. Introducción Metodología del contraste de hipótesis Métodos no paramétricos

Transcripción

1 7-1 Tema 7 Contrastes de Hipótesis para una Muestra Introducción Metodología del contraste de hipótesis Métodos no paramétricos Test binomial Test de los signos Test de rango con signos de Wilcoxon Test de bondad del ajuste: χ 2 Test de bondad del ajuste: Kolmogorov-Smirnov Test de corridas Métodos bayesianos Contraste para la media de una población normal Ejemplo: cúmulos globulares de la Galaxia

2 7-2 Introducción Contrastes de hipótesis Estimación de parámetros ajuste de modelos El contraste de hipótesis permite tomar decisiones ( son los datos consistentes con un cierto modelo? se ajustan a una cierta distribución de probabilidad? es la muestra consistente con otra muestra? hay correlación? Métodos paramétricos Métodos no paramétricos Contrastes clásicos Contrastes bayesianos Muestras grandes Distribución de probabilidad conocida Datos cuantitativos Distribución de probabilidad conocida Se calcula la probabilidad de la hipótesis Método más directo para incorporar nuevo conocimiento y entender las incertidumbres Muestras pequeñas Distribución de probabilidad desconocida Válidos para datos de rango y cualitativos No existen

3 Metodología a del contraste de hipótesis 7-3 Formulación de las hipótesis: Hipótesis nula (H 0 ) vs Hipótesis alternativa (H 1 ) Aceptación de la hipótesis nula los datos no están en contra Rechazo de la hipótesis nula los datos indican que es improbable que sea cierta Se utiliza un estadístico de prueba con distribución conocida en el caso de que H 0 sea cierta Ejemplo: media de una población normal α: nivel de significación Contraste bilateral Contrastes unilaterales región crítica región crítica región crítica región de aceptación región de aceptación región de aceptación

4 7-4 Métodos no paramétricos Test para el parámetro de una población binomial: Test binomial Tests para la mediana de una población o para comparar observaciones pareadas: Test de los signos Test de rango con signos de Wilcoxon Tests de bondad del ajuste a una distribución o a un modelo: Test χ 2 Test de Kolmogorov-Smirnov (1 muestra) Test para comprobar la aleatoriedad de una secuencia: Test de corridas

5 7-5 Test binomial Test para el parámetro de una distribución binomial Sea una muestra binomial: n ensayos independientes, con O 1 éxitos y O 2 fracasos p: probabilidad de éxito en un ensayo (cte para todos los ensayos) Bilateral: Se buscan los valores críticos t 1 y t 2 tales que, bajo la hipótesis nula: (no se puede hacer para cualquier α) Unilateral: Es la base de tests más elaborados y versátiles que se pueden aplicar a variables no binomiales (NO aplicar este test a otro tipo de variables). Válido para muestras pequeñas. Para muestras grandes, la binomial se aproxima por una normal. El test de los signos es el más directo y potente.

6 7-6 Bilateral: Test de los signos Prueba no paramétrica para contrastar la mediana de una población. Se reemplaza cada valor de la muestra por un signo + o dependiendo de si es mayor o menor que la mediana poblacional. Mediana de una población X: nº de signos + en la muestra (variable aleatoria binomial) Los valores iguales a la mediana se excluyen de la muestra Para muestras grandes (n > 10): Aproximación a la normal. Se realiza un test binomial con p = 0.5 Para α=0.05 Se puede utilizar para probar la igualdad de medias en observaciones pareadas. Cada par de valores X i i, Y ii se reemplaza por un signo + o dependiendo de cual sea mayor Aplicable a datos dicotómicos y de rango. Algo menos eficiente que el test t para distribuciones normales Mucho más fiable que el test t si la distribución tiene grandes colas.

7 7-7 Test de rangos con signo de Wilcoxon Modificación del test de los signos para tener en cuenta las magnitudes de las diferencias con la mediana. Sólo se puede aplicar si la distribución es simétrica y continua Bilateral: Unilateral: Se calculan las diferencias respecto a la mediana poblacional. Se asignan rangos a las diferencias absolutas de menor a mayor (sin tener en cuenta el signo; si hay empates se asignan los rangos medios) Se calculan: Bilateral: Unilateral: Para muestras grandes (n > 15): Aproximación a la normal. Comparado con el test t, la eficiencia (A.R.E.) es > Se puede utilizar para probar la igualdad de medias en observaciones pareadas (no hace falta suponer simetría).

8 7-8 Valores críticos para el test de rangos con signo de Wilcoxon

9 7. Contrastes de Hip Contrastes de Hipótesis para una Muestra Cúmulo M(K) Cúmulo M(K) Cúmulo M(K) 7-9 Ejemplo: Cúmulos C globulares de la Galaxia 47 Tuc NGC M NGC NGC M NGC M Pal Eridanus M M Pal NGC NGC NGC NGC Be NGC NGC NGC NGC NGC M NGC NGC M NGC M NGC NGC NGC M M NGC M NGC NGC Pal NGC NGC NGC IC Ton MASS GC NGC NGC MASS GC NGC NGC NGC NGC NGC M NGC NGC omega Cen M NGC NGC M NGC NGC NGC NGC NGC NGC NGC NGC NGC NGC M M NGC NGC M Pal NGC NGC NGC Pal

10 7-10 Ejemplo: Cúmulos C globulares de la Galaxia Contraste para la media ( puede ser la magnitud media igual a -10? Test de los signos: 30 signos + 51 signos Se rechaza para α=0.05 Test de Wilcoxon: Se asignan rangos a los D i Se acepta para α=0.05 Pero se ha supuesto distribución simétrica

11 7-11 Test de bondad del ajuste: χ 2 Se ajusta la muestra a un determinado modelo o a una determinada distribución de probabilidad? Los datos se agrupan en k intervalos O i : frecuencias observadas en cada intervalo E i : frecuencias esperadas si se cumple el modelo λ > 5 Si H 0 es cierta: es una χ 2 con k - 1 grados de libertad Si no se cumple que todos los E i > 5, se unen varios intervalos (al menos el 80%) Si para calcular E i hay que usar p parámetros estimados de la muestra (ej. μ, σ), el número de grados de libertad es: Ventajas: Método muy usado. Se puede analizar bin a bin. Fácil de aplicar (como regla aproximada, si χ 2 es mayor que 2 k, se rechaza la hipótesis nula). Desventajas: Pérdida de eficiencia e información al agrupar los datos en intervalos. Son necesarias muestras grandes (para cumplir E i i > 5). Es bilateral (no indica la dirección de las desviaciones).

12 7-12 Test de bondad del ajuste: Kolmogorov-Smirnov S e (x): distribución de frecuencias acumuladas (función de distribución) bajo H 0 S o (x): distribución de frecuencias acumuladas de la muestra Ventajas sobre el test χ 2 No hay pérdida de información por agrupamiento Válido para muestras pequeñas (para muestras intermedias es más potente) Pueden hacerse contrastes unilaterales Permite calcular un intervalo de confianza para la distribución de probabilidad de la población. Inconvenientes La distribución teórica debe ser continua (aunque existen modificaciones para distribuciones discretas no se puede aplicar a variables cualitativas) No se pueden conocer los valores críticos si se calculan estimaciones de los parámetros poblacionales a partir de la muestra.

13 7-13 Valores críticos para el test de Kolmogorov-Smirnov (1 muestra)

14 7-14 Test χ 2 Ejemplo: Cúmulos C globulares de la Galaxia Siguen sus magnitudes absolutas una distribución normal? 12 intervalos 30 Variable: Var2, Distribution: Norm al al Chi-Square test = 3,13214, df df = 4 (adjusted),, p = 0,53596 No. of of observations Agrupando intervalos para tener frecuencias esperadas > 5: 7 intervalos Category (upper limits) Se acepta la hipótesis de normalidad

15 7-15 Ejemplo: Cúmulos C globulares de la Galaxia Test de Kolmogorov-Smirnov Suponiendo: Relative Frequency (%) Se acepta la hipótesis de normalidad Si: Valores críticos (N=81): α = 0.20 D = α = 0.10 D = α = 0.05 D = Se rechaza para p = 0.10 pero se acepta para p = 0.05

16 7-16 Test de corridas Test para comprobar la aleatoriedad de una secuencia binaria Sea una secuencia de resultados de un proceso binario (éxito/fracaso): (ej. EEFEEFFEEEEFFF) n 1 : número de éxitos n 2 : número de fracasos r : número de corridas (secuencias del mismo resultado) (las observaciones sucesivas son independientes) Ej: Típicamente, el test se hace unilateral: Para muestras grandes (n 1 ó n 2 > 20) Método útil para comprobar la aleatoriedad de secuencias temporales. Se suele usar para comprobar la aleatoriedad de los residuos (positivos/negativos) en un ajuste a un modelo (ej. espectro). Comprobación de la validez del modelo ajustado

17 7-17 Valores críticos para el test de corridas Los dos números indican los valores críticos (mínimo y máximo) para un test con n 1 éxitos y n 2 fracasos. El nivel de significación es α = 0.05 para un test bilateral y α = para un test unilateral.

18 7-18 Ejemplo: Ajuste al espectro del cuasar 3C207 Se acepta la hipótesis de aleatoriedad Se rechaza. Hay evidencias de emisión

19 Métodos bayesianos Contraste para la media para una distribución n normal 7-19 Verosimilitud: La verosimilitud de la muestra es proporcional a la verosimilitud de la media Prior uniforme:

20 7-20 Métodos bayesianos (II) Prior normal: (prior conjugado) La distribución de probabilidad posterior de μ es una normal con: Posterior Prior Likelihood m Posterior mean 131

21 7-21 Bilateral: Métodos bayesianos (III) Contrastes de hipótesis: Para un nivel α, se calcula un intervalo de credibilidad: [μ 1,μ 2 ] Prior normal: (σ se supone conocida) Prior no normal: Unilateral: Se calcula Distribución de probabilidad de la hipótesis Para un prior normal: