5. Distribuciones de probabilidad multivariadas

Transcripción

1 5. Distribuciones de probabilidad multivariadas Sobre un dado espacio muestral podemos definir diferentes variables aleatorias. Por ejemplo, en un experimento binomial, X 1 podría ser la variable binomial número de total de éxitos y X 2 el número de éxitos en las k primeras pruebas. Si las variables aleatorias X 1, X 2,..., X n están definidas sobre el mismo espacio muestral S se dice que están conjuntamente distribuidas Distribución de probabilidad conjunta La función de distribución conjunta para las variables aleatorias X 1, X 2,..., X n se define como F X1,...,X n x 1,..., x n Prob {X 1 < x 1,..., X n < x n } 22 donde {X 1 < x 1,..., X n < x n } = {X 1 < x 1 } {X 1 < x 2 }... {X n < x n }. En otras palabras, F X1,...,X n x 1,..., x n es la probabilidad de que las variables aleatorias X i tomen simultaneamente valores en los intervalos { < X i < x i } con i = 1,..., n. La densidad de probabilidad conjunta f X1,...,X n x 1,..., x n se define entonces como de tal manera que f X1,...,X n x 1,..., x n = n F X1,...,X n x 1,..., x n x 1... x n 23 x1 xn F X1,...,X n x 1,..., x n = dx 1... dx n f X1,...,X n x 1,..., x n 24 Consideremos por simplicidad de aqui en mas solo dos variables aleatorias X e Y, con funciones de distribución y densidad F X,Y x, y y f X,Y x, y respectivamente. La función de distribución satisface F X,Y, y = F X,Y x, = F X,Y, = 0 y F X,Y, = 1. Ademas: F X,Y x 2, y F X,Y x 1, y = Prob {x 1 < X 1 < x 2 ; Y < y} La densidad de probabilidad f X,Y x, y satisface las condiciones f X,Y x, y 0 y dx dy f X,Y x, y = 1 Dadas dos variables X e Y distribuidas conjuntamente, la función de distribución reducida o marginal F X x para la variable X viene dada por F X x = F X,Y x, = x dx dy f X,Y x, y Y de la misma manera, la densidad de probabilidad marginal f X x para la variable X se define como f X x = dy f X,Y x, y Las funciones de distribución y marginal para la variable Y se obtienen de manera semejante. El momento n-ésimo de la variable X se define como x n = dx dy x n f X,Y x, y = Los momentos conjuntos para las variables X e Y se definen como x m y n = x n f X x dx dx dy x n y m f X,Y x, y 25 17

2 El momento conjunto mas comunmente utilizado en física es la covariancia CovX, Y = x x y y = xy x y 26 que nos da una medida de la correlación entre fluctuaciones de ambas variables. Altermativamente, suele usarse la función de correlación: CorX, Y = CovX, Y σ X σ Y 27 la cual es adimensional. La función de correlación satisface las siguientes propiedades facilmente demostrables: CorX, Y = CorY, X 1 CorX, Y 1 CorX, X = 1, CorX, X = 1 CoraX + b, cy + d = CorX, Y si a, c 0 Dos variables aleatorias X e Y son independientes si f X,Y x, y = f X x f Y y x, y Si X e Y son independientes se satisfacen las siguientes propiedades x m y n = x m y n CorX, Y = 0 V X + Y = V X + V Y Esta última propiedad se generaliza directamente al caso de n variables X 1,..., X n todas independientes entre sí: n n V X i = V X i 28 i=1 i=1 Al tratar con muchas variables aleatorias, a menudo necesitamos encontrar la densidad de probabilidad de una nueva variable que es función de las anteriores. Por ejemplo, supongamos que conocemos la densidad conjunta f X,Y x, y y queremos obtener la densidad de probabilidad de la variable Z = GX, Y, donde G es una función de dos variables conocida. En una generalización de la Ec.14, tenemos que f Z Z = dx dy δ z Gx, y f X,Y x, y 29 esta expresión se generaliza facilmente al caso de varias variables dependientes. Tomemos un ejemplo. Sean X e Y dos variables aleatorias independientes, con distribuciones gaussianas de media nula y variancia unitaria, esto es f X x = f Y y = 1 2π e x2 /2 1 2π e y2 /2 18

3 Supongamos que queremos conocer la densidad conjunta de las variables Tenemos que V = X + Y W = X Y 30 f V,W v, w = 1 dx dy δ v v x, y δ w w x, y e x2 +y 2 /2 2π donde v x, y = x + y y w x, y = x y. Cambiando las variables de integración a v, w : f V,W v, w = 1 dv dw x y J 2π v w donde hemos usado que x 2 + y 2 = w 2 + v 2 /2 y J x y v w es el Jacobiano de la transformación 30. Así, δ v v δ w w e w 2 +y 2 /4 = 1 2 f V,W v, w = 1 4π e w2 +y 2 /4 Dado que f V,W v, w es factorizable, las variables V y W son independientes. De la Ec.29 la función característica para una variable Z = GX, Y resulta f Z k = 5.2. Distribuciones binomiales Derivación mediante la función característica dx dy e ikgx,y f X,Y x, y 31 Resulta instructivo derivar nuevamente la distribución binomial a partir de los conceptos que hemos visto en esta sección. En un experimento binomial podemos describir el resultado de cada prueba individual mediante una variable aleatoria X i, donde el índice i corresponde al número de la prueba. La variable X i puede tomar los valores x = 1 con probabilidad p y x = 0 con probabilidad 1 p. La densidad de probabilidad para esta variable es y su función característica resulta f Xi x = p δx p δx f Xi k = 1 p + p e ik 32 Dado que todas las pruebas son independientes, la densidad de probabilidad conjunta para las variables correspondientes a las n pruebas es f X1,...,X n x 1,..., x n = f X1 x 1 f Xn x n La variable binomial número de éxitos en las n pruebas puede expresarse como Y n = n i=1 X i. De la Ec.31, la función característica para la variable Y n resulta 19

4 f Yn k = dx 1 dx n e ikx 1+ +x n f X1 x 1 f Xn x n = f X1 k f Xn k = q + p e ik n 33 donde q = 1 p. Expandiendo el binomio tenemos n n f Yn k = p l q n l e ikl l l=0 de donde la densidad de probabilidad para la variable Y n resulta f Yn y = 1 dk e iky fyn k = 2π que es equivalente a la expressión Límite n n l=0 n l p l q n l δy l 34 Queremos obtener el comportamiento de la distribución binomial cuando n 1. Vamos a definir primero la variable aleatoria Z n = Y n y n σ Yn = Y n pn pq n La densidad de probabilidad para la variable Z n es f Zn z = dy δ z y pn f Yn y pq n y la función característica f Zn k = dz e ikz f Zn z = = e ik pn/q fyn k pq n = dy exp ik y pn pq n f Yn y q e ik p/qn + p e ik q/pn n 35 donde hemos usado la Ec.33 y que q = 1 p. A continuación desarrollamos la cantidad entre paréntesis en potencias de k. Es facil ver que los dos primeros términos no nulos son 1 k 2 /2n. Así, podemos expresar donde R n = 2 Para n tenemos que R n 0 y f Zn z = m=3 f Z z lím f Zn z = lím n n 1 k2 2n 1 + R n n 1 ik m 2 pq m + q p m m! n pq m/2 20 n 1 k2 = e k2 /2 2n

5 Así, en el límite n obtenemos f Z z = 1 dk e ikz e k2 /2 = 1 e z2 /2 2π 2π La variable Z tiene una distribución gaussiana con media nula y variancia σ Z = 1. Para el caso n 1, pero finito, aún podemos aproximar f Zn z 1 2π exp z 2 /2. Transformando nuevamente a la variable y = σ Y z + y tenemos finalmente 1 y y 2 f Yn y dz δ y σ Y z + y f Z z = exp σ Y 2π 2σY Caminata aleatoria El problema de la caminata aleatoria es un ejemplo de un problema binomial en física. Este es un modelo simplificado para el movimiento Browniano, esto es, el movimiento de una partícula bajo la acción de fuerzas aleatorias sin corrleación entre sí y constituye la explicación mas básica del fenómeno de difusión. Veremos el caso mas simple de una caminata unidimensional. Consideremos el caso de una partícula restringida a moverse a lo largo del eje x. A cada intervalo de tiempo τ la partícula tiene una probabilidad p = 1/2 de dar un paso de longitud hacia la derecha y una probabilidad q = 1/2 de dar un paso equivalente hacia la izquierda. Supongamos que la partícula ha realizado N saltos y que los saltos son estadísticamente independientes la probabilidad de salto a cada paso es independiente de todos los anteriores. El salto i-ésimo tiene entonces asociada una variable X i que toma los valores x = ± con probabilidades p = q = 1/2 y por lo tanto su densidad de probabilidad es 36 f Xi x = 1 2 δx + δx + y la función característica resulta f Xi k = cosk. El desplazamiento neto Y N de la partícula al cabo de N pasos esta dado por Y N = N i=1 X i, suponiendo que la partícula parte del orígen. De la Ec.33 tenemos que la función característica para la variable Y N es f YN k = cosk N 37 Vamos a analizar ahora el límite cuando tanto el desplazamiento neto en un paso como el tiempo entre pasos τ se vuelven infinitesimalmente pequeños, buscando una ecuación diferencial para f YN k. Al cabo de N pasos el tiempo transcurrido es t = Nτ. Podemos escribir entonces f YN k = f Y k, t. Dado que la partícula parte del orígen y = 0, tenemos que f Y y, t = 0 = δy y por lo tanto f Y k, 0 = 1. De la Ec.37 podemos escribir f Y k, t + τ f Y k, t = cosk 1 f Y k, t = k Si tomamos el límite para N y τ 0 manteniendo t = Nτ constante, tenemos lím lím N τ 0 De la Ec.38 tenemos entonces f Y k, t f Y k, t + τ f Y k, t = lím N lím τ 0 lím 0 = 1 τ τ k2 2 2 = f Y k, t + La única manera de que este límite sea finito y distinto de cero es que 21 f Y k, t f Y k, t 40

6 Figura 4: Densidad de probabilidad para la caminata aleatoria unidimensional con D = 1/2. lím lím 2 τ 0 0 τ en cuyo caso obtenemos la ecuación diferencial f Y k, t cuya solución con la condición inicial f Y k, 0 = 1 es La densidad de probabilidad es = D < = D k 2 fy k, t, 41 f Y k, t = e Dk2 t f Y y, t = 1 1 e iky e Dk2t = 2π 4π Dt exp y2 4Dt Así, la probabilidad de encontrar al caminante en una posición entre y e y + dy es gaussiana con media nula y desviación estándar σ = 2Dt. La densidad de probabilidad se desparrama en el tiempo manteniendo el área unitaria, como se muestra en la Fig.4. Notemos que y 2 = σ t. Este es el comportamiento característico de un movimiento difusivo: el desplazamiento de una partícula browniana de su posición inicial crece com t. La constante D se conoce como coeficiente de difusión. De hecho, notemos que de la definición tenemos que f Y y, t = 1 2π e iky fy k, t y f Y y, t = 1 e iky f Y k, t 2π 2 f Y y, t y 2 = 1 k 2 e iky fy k, t 2π 22

7 Así, antitransformando la Ec.41 obtenemos f Y k, t = D 2 f Y y, t y 2 44 Esta última ecuación diferencial se conoce como ecuación de difusión tiene la misma estructura que la ecuación de difusión de calor y su solución viene dada por la Ec El Teorema del Límite Central Consideremos un conjunto de N variables aleatórias X i, todas independientes entre sí e idénticamente distribuidas, esto es, la densidad de probabilidad f X x es la misma para todas. Un ejemplo de esto podría ser la repetición independiente de un mismo experimento N veces. Sean µ = x y σ 2 = V X el valor medio y la variancia correspondientes a la densidad f X x. Consideremos ahora la variable Y N, definida como la desviación del promedio aritmético de las N variables respecto de µ, esto es donde Y N 1 N N N X i µ = Z i 45 i=1 i=1 Z i 1 N x i µ donde Z i = 0 y V Z i = σ 2 /N 2. Resulta inmediato que con lo cual N X i = Nµ i=1 Y N = 0 46 Pensemos en que queremos medir una cierta cantidad, la cual fluctua de experimento en experimento X i. Habitualmente queremos estimar el valor medio de esta variable µ, para lo cual repetimos el experimento N veces y aproximamos µ por el promedio aritmético de las N mediciones. Sin embargo, ese promedio es a su vez una variable aleatoria si repetimos la serie de N experimentos, el nuevo promedio también fluctua. La Ec.46 nos dice que el valor medio de este promedio coincide con µ, con lo es en principio un estimador aceptable. Sin embargo, querríamos evaluar de alguna manera el error cometido en esta estimación. Para eso tenemos que analizar las fluctuaciones del promedio aritmético respecto de su valor medio, las cuales están descriptas por la variable Y N. Si recordamos la ecuación 28, vemos que, bajo el supuesto de que las mediciones son completamente independientes entre sí, tenemos que V Y N = N i=1 V Z i = σ2 N con lo cual σ YN = σ/ N. Esto nos dice que el la dispersión del promedio disminuye con N. Sin embargo, podemos dar una descripción mas acabada si obtenemos la distribución de probabilidad para la variable Y N. Para ello calculemos primero la función característica para las variables Z i. Tenemos que f Z k = dx e ik/nx µ f X x = k 2 N 2 σ2 + 48

8 donde hemos desarrollado en serie de Taylor la exponencial e integrado término a término. Si este desarrollo es válido, es decir, si los momentos de f X x son finitos, los término superiores pueden despreciarse para N suficientemente grande notemos que el caracter oscilatorio del integrando asegura que la integral se va a cero para valores grandes de k. La función característica para Y N es por lo tanto f YN k = y la densidad de la variable Y N : k 2 N N 2 σ2 + exp k2 σ 2 2N f YN x 1 dk e iky exp k2 σ 2 N = 2π 2N 2πσ 2 exp para N 49 Ny2 2σ 2 Independientemente de la forma particular de f X x, si sus momentos son finitos, el promedio de un número grande de mediciones de X tiene una distribución gaussiana centrada en x y con desvío estándar igual al devío de X dividido por N. Este el el Teorema del Límite Central