Procesos estocásticos: media, varianza, autocovarianza y autocorrelación
1. La pregunta
Hay una dificultad conceptual en el corazón del análisis de series temporales, y conviene verla de frente.
Para estimar la media de la altura de los españoles se toma una muestra de mil personas. Se tienen mil observaciones de la misma variable aleatoria. Pero el PIB de España en 2024 se observó una sola vez. Nunca habrá otra realización de ese año. ¿Cómo se estima entonces la media o la varianza de algo de lo que solo hay un dato?
La respuesta —que se pueden sustituir promedios entre realizaciones por promedios a lo largo del tiempo, siempre que el proceso sea estacionario y ergódico— es lo que hace posible todo el bloque. Este tema la formaliza, y de paso construye la función de autocorrelación, que es la herramienta con la que se identifican los modelos del tema 39.
2. Intuición
Proceso estocástico: la película de todos los futuros posibles. Imagina que el universo se pudiera rebobinar hasta 1990 y dejar correr la historia otra vez. Saldría otra serie de PIB: parecida en lo general, distinta en el detalle. Y otra vez, otra. El proceso estocástico es el conjunto de todas esas historias posibles; la serie que observamos es una de ellas, elegida por el azar.
Con esa imagen, la media del PIB en 2024 es el promedio de ese año entre todas las historias posibles —no entre los años de nuestra historia—. Y ahí está el problema: solo tenemos una historia.
Estacionariedad: que las reglas no cambien. Si el proceso se comporta igual en 1995 que en 2024 —misma media, misma variabilidad, misma memoria—, entonces los distintos años de nuestra historia son, a efectos de información, como distintas realizaciones. Podemos promediar a lo largo del tiempo.
Sin estacionariedad, promediar mezcla regímenes distintos y el promedio no describe ninguno.
Ergodicidad: que la memoria se acabe. Además hace falta que las observaciones lejanas sean casi independientes. Si el proceso recordara para siempre, cien años de datos serían poco más informativos que uno.
Autocorrelación: la memoria medida. ¿Cuánto se parece hoy a ayer? ¿Y a hace un año? La función de autocorrelación responde a eso para cada distancia temporal, y su forma es la huella dactilar del proceso: cada familia de modelos deja un dibujo característico.
3. Formalización
Proceso estocástico
Un proceso estocástico es una familia de variables aleatorias indexada por el tiempo:
Una realización o trayectoria es una sucesión concreta de valores observados, . En economía se dispone de una sola realización, y de un tramo finito de ella.
Siguiendo NOTACION.md: mayúscula para la variable aleatoria, minúscula para el
valor observado.
Momentos del proceso
es la autocovarianza de orden : la covarianza del proceso consigo mismo periodos antes. Nótese que .
En general estos momentos dependen de , y con una sola realización no se pueden estimar. De ahí la necesidad de la estacionariedad.
Estacionariedad
Estricta (o fuerte). La distribución conjunta de cualquier grupo de variables no cambia al desplazarlas en el tiempo. Es una condición muy exigente y poco operativa.
Débil (o en covarianza). La que se usa. Exige tres condiciones:
La tercera es la clave: la relación entre dos observaciones depende solo de la distancia que las separa, no de en qué momento estén. La covarianza entre enero y febrero de 1998 es la misma que entre enero y febrero de 2024.
Salvo aviso, «estacionario» significa en este sitio estacionario en sentido débil.
Series económicas que NO son estacionarias, y son la mayoría: el PIB (media creciente), el IPC, la población, las cotizaciones bursátiles. Por eso el tema 36 transformaba antes de modelar.
Ergodicidad
Un proceso estacionario es ergódico en la media si
es decir, si el promedio temporal de una sola realización converge a la media del proceso.
Condición suficiente: que las autocovarianzas tiendan a cero lo bastante rápido,
Por qué importa. La ergodicidad es lo que autoriza a sustituir el promedio entre realizaciones (que no tenemos) por el promedio temporal (que sí). Sin ella, toda la inferencia con una sola serie sería imposible.
Un contraejemplo instructivo. Sea para todo , con una variable aleatoria de media . El proceso es estacionario —media, varianza y covarianzas constantes— pero no es ergódico: cada realización es una constante, y su promedio temporal es esa constante, no . Por muchos datos que se recojan, no se aprende nada sobre .
Ruido blanco
El proceso estacionario más simple, y el ladrillo con el que se construye todo lo demás:
Sin memoria alguna. El valor de hoy no dice nada sobre el de mañana.
Si además es gaussiano e independiente (no solo incorrelado), se habla de ruido blanco gaussiano.
Su papel en el bloque es doble:
- Es el componente básico con el que se construyen los procesos AR y MA.
- Es el objetivo del diagnóstico: un modelo está bien especificado cuando sus residuos son ruido blanco. Si queda estructura, es que el modelo no la ha capturado.
Función de autocorrelación (ACF)
Propiedades:
- siempre.
- .
- Simétrica: , así que solo se representan los retardos positivos.
La representación gráfica de frente a es el correlograma, y es la herramienta central de identificación del tema 39.
Estimación muestral:
Nótese que el denominador usa todas las observaciones aunque el numerador solo tenga sumandos. Es la convención estándar y garantiza propiedades deseables de la matriz de autocorrelaciones.
Bandas de significación. Bajo la hipótesis de ruido blanco, , de modo que la banda al 95 % es
Los valores que salen de la banda son significativamente distintos de cero. Con , la banda es .
Aviso sobre comparaciones múltiples. Si se miran 24 retardos al 5 %, cabe esperar que uno salga de la banda por puro azar (tema 28). Un pico aislado en el retardo 17 no significa nada; lo informativo son los primeros retardos y los estacionales.
Función de autocorrelación parcial (PACF)
mide la correlación entre e eliminando el efecto de los retardos intermedios.
Por qué hace falta. Si depende de y de , entonces e estarán correlacionadas aunque no haya relación directa entre ellas: la correlación es heredada. La ACF no distingue lo directo de lo heredado; la PACF sí.
Es exactamente la diferencia entre correlación simple y coeficiente de regresión múltiple del tema 30: es el coeficiente de al regresar sobre .
Se cumple , y a partir de ahí divergen.
Las firmas de cada proceso
Este cuadro es el que se usa para identificar modelos, y conviene memorizarlo:
| Proceso | ACF | PACF |
|---|---|---|
| Ruido blanco | todo cero | todo cero |
| AR() | decae gradualmente | se corta tras el retardo |
| MA() | se corta tras el retardo | decae gradualmente |
| ARMA() | decae gradualmente | decae gradualmente |
| No estacionario | decae muy lentamente, casi lineal |
La simetría entre AR y MA es la idea que hay que retener: el AR se corta en la PACF, el MA en la ACF.
La última fila es la señal de alarma más importante: una ACF que apenas decae después de 20 retardos indica que la serie no es estacionaria y hay que volver a las transformaciones del tema 36.
Contraste conjunto de ruido blanco
En lugar de mirar retardo a retardo, se contrastan varios a la vez.
Contraste de Ljung-Box:
bajo : las primeras autocorrelaciones son todas cero.
Se rechaza para valores grandes de . Es el contraste estándar para diagnosticar residuos: si los residuos de un modelo lo superan, queda estructura sin capturar.
Ajuste de grados de libertad. Si se aplica a los residuos de un modelo ARMA() estimado, los grados de libertad son , porque se han estimado parámetros. Es un detalle que los paquetes hacen automáticamente y que a mano se olvida.
4. Ejemplo económico resuelto
Problema. Se dispone de la serie trimestral de la tasa de variación del PIB de un país durante 80 trimestres. Las primeras autocorrelaciones estimadas son:
| 1 | 2 | 3 | 4 | 5 | 6 | 8 | 12 | |
|---|---|---|---|---|---|---|---|---|
| 0,62 | 0,41 | 0,25 | 0,18 | 0,09 | 0,06 | 0,02 | ||
| 0,62 | 0,04 | 0,05 | 0,01 | 0,00 |
- Calcula las bandas de significación.
- Identifica qué retardos son significativos en cada función.
- Propón un modelo.
- Contrasta con Ljung-Box hasta si la serie fuera ruido blanco.
Paso 1. Bandas de significación.
Paso 2. Retardos significativos.
ACF. Superan 0,219 en valor absoluto:
A partir de () ya no.
Patrón: decaimiento gradual. Y no cualquiera: mirando los cocientes,
decae aproximadamente de forma geométrica, con razón cercana a 0,62. Es exactamente el patrón de un AR(1) con :
PACF. Solo supera la banda. Todos los demás están muy por debajo de 0,219, y de hecho son prácticamente cero.
Patrón: se corta tras el retardo 1.
Paso 3. Identificación del modelo.
Aplicando el cuadro de firmas:
| Observado | Compatible con |
|---|---|
| ACF decae gradualmente | AR |
| PACF se corta en | AR(1) |
Comprobaciones adicionales que refuerzan el diagnóstico:
- La ACF decae pero no se estanca. A los 12 retardos ya está en . Si la serie no fuera estacionaria, seguiría siendo alto. La serie es estacionaria, lo cual tiene sentido: es una tasa de variación, no un nivel.
- No hay picos estacionales. y : si hubiera estacionalidad trimestral sin corregir, esos retardos destacarían. No lo hacen, así que la serie está desestacionalizada o no tiene estacionalidad apreciable.
Interpretación económica de . El crecimiento del PIB tiene inercia: un trimestre bueno tiende a seguir a otro bueno. Concretamente, el 62 % de la desviación respecto al crecimiento medio persiste al trimestre siguiente, el 38 % () dos trimestres después, y así sucesivamente.
Esa persistencia es un hecho estilizado bien conocido de los ciclos económicos, y es lo que permite que las previsiones a un trimestre vista tengan alguna utilidad.
Paso 4. Contraste de Ljung-Box hasta .
Término a término:
| cociente | ||||
|---|---|---|---|---|
| 1 | 0,62 | 0,3844 | 79 | 0,0048658 |
| 2 | 0,41 | 0,1681 | 78 | 0,0021551 |
| 3 | 0,25 | 0,0625 | 77 | 0,0008117 |
| 4 | 0,18 | 0,0324 | 76 | 0,0004263 |
| 5 | 0,09 | 0,0081 | 75 | 0,0001080 |
| 6 | 0,06 | 0,0036 | 74 | 0,0000486 |
| Σ | 0,0084155 |
La serie NO es ruido blanco, con enorme margen. Tiene estructura, y por tanto merece la pena modelarla: no es simple ruido.
Cómo se usará este contraste después. Una vez estimado el AR(1), se aplica Ljung-Box a sus residuos. Si el modelo ha capturado bien la dinámica, los residuos serán ruido blanco y no rechazará. Ese es el criterio de validación del tema 39, y es mucho más informativo que cualquier .
5. Errores típicos
Estimar momentos sin comprobar la estacionariedad. La media muestral de una serie con tendencia no estima nada: es un número intermedio entre el principio y el final que no describe ningún momento.
Confundir estacionariedad con ergodicidad. Un proceso puede ser estacionario y no ergódico, como el contraejemplo de la constante aleatoria. Se necesitan las dos para poder inferir de una sola realización.
Interpretar la ACF de una serie no estacionaria. Si la ACF decae muy despacio, la respuesta no es identificar un AR de orden alto: es diferenciar y volver a mirar.
Sobreinterpretar picos aislados. Con 24 retardos y bandas al 95 %, alguno saldrá por azar. Lo informativo son los primeros retardos y los múltiplos de .
Olvidar la simetría. . La ACF no aporta información nueva en los retardos negativos, y por eso los correlogramas solo muestran los positivos.
Confundir ACF y PACF al identificar. El AR se corta en la PACF; el MA, en la ACF. Es la confusión más frecuente y lleva a especificar el modelo justo al revés.
Usar Ljung-Box sin ajustar los grados de libertad. Aplicado a residuos de un ARMA estimado, los grados de libertad son .
Creer que autocorrelación nula implica independencia. Solo implica ausencia de relación lineal, igual que en el tema 20. Un proceso puede tener ACF nula y dependencia no lineal fuerte: es el caso de las series financieras, donde las rentabilidades son casi incorreladas pero sus cuadrados no.
6. Ejercicios
Ejercicio 1 · Comprobar estacionariedad
básicoDetermina si estos procesos son estacionarios en sentido débil:
- , con
- (paseo aleatorio)
Ver solución
1. Estacionario.
Es ruido blanco desplazado. Cumple las tres condiciones.
2. NO estacionario. Desarrollando desde :
La varianza crece con el tiempo, así que falla la segunda condición. Es el caso paradigmático de serie con raíz unitaria, y el objeto central del tema 38.
3. NO estacionario.
La media depende de : falla la primera condición. Es una serie con tendencia determinista.
(Matiz importante: se vuelve estacionaria quitando la tendencia, no diferenciando. El caso 2, al revés. Distinguirlos es justo lo que hace el contraste de raíces unitarias.)
4. Estacionario. Es un MA(1):
Depende solo de . Todo proceso MA de orden finito es estacionario, sea cual sea el valor de sus parámetros: es una propiedad que lo distingue de los AR.
Ejercicio 2 · Calcular la ACF de un MA(1)
básicoPara el proceso con :
- Calcula , y .
- Deduce y comprueba que .
Ver solución
1. Autocovarianzas.
(los términos cruzados se anulan porque el ruido blanco es incorrelado).
Desarrollando, el único producto con esperanza no nula es :
No hay términos comunes: los subíndices y son disjuntos.
En general, para todo . Esa es la firma del MA(1): la ACF se corta tras el primer retardo.
2. Autocorrelación de primer orden.
Cota. Hay que probar que , es decir, que .
Reordenando:
que es siempre cierto, con igualdad solo si .
Consecuencia práctica muy útil. Si en un correlograma aparece , el proceso NO puede ser un MA(1), sea cual sea . Hay que buscar otra especificación.
Y el máximo se alcanza en , que son precisamente los valores en la frontera de la invertibilidad del tema 38. El que delataba la sobrediferenciación en el tema 36 es exactamente este caso con .
Ejercicio 3 · Identificar a partir del correlograma
medioTres series de observaciones mensuales dan estos correlogramas:
Serie A: ACF: 0,85; 0,72; 0,61; 0,52; 0,44; … (decae despacio). PACF: 0,85; ; 0,03; ; …
Serie B: ACF: ; 0,05; ; 0,01; … PACF: ; ; ; ; …
Serie C: ACF: 0,97; 0,94; 0,91; 0,88; 0,85; … (a los 30 retardos, 0,62).
Identifica cada una.
Ver solución
Banda de significación:
Serie A: AR(1) con .
- ACF decae gradualmente y de forma geométrica: , , . El ajuste es exacto.
- PACF se corta tras el retardo 1: solo supera la banda.
Aplicando el cuadro: ACF decae + PACF se corta en 1 AR(1).
Serie B: MA(1) con .
- ACF se corta tras el retardo 1: solo supera 0,163.
- PACF decae gradualmente, alternando signo.
Estimando a partir de :
Las dos soluciones son y . Se elige la primera por invertibilidad ().
Serie C: NO estacionaria.
La ACF apenas decae: 0,97 en el primer retardo y todavía 0,62 en el trigésimo. Ese decaimiento casi lineal es la firma inequívoca de una raíz unitaria.
No hay que intentar identificar ningún ARMA sobre esta serie. Hay que diferenciar y volver a calcular el correlograma. Si tras la ACF decae rápidamente, se identifica sobre la serie diferenciada; si sigue sin decaer, se diferencia otra vez —comprobando la varianza, para no sobrediferenciar—.
Cómo distinguir C de A. Ambas tienen ACF decreciente, y la diferencia es la velocidad. Un AR(1) estacionario con llega a en el retardo 30: prácticamente cero. La serie C sigue en 0,62. Esa es la señal.
Ejercicio 4 · Momentos de un AR(1) y su ACF
avanzadoSea el proceso con y .
- Calcula .
- Calcula .
- Demuestra que .
- ¿Qué pasa cuando ?
Ver solución
1. Media. Suponiendo estacionariedad, para todo . Tomando esperanzas en la ecuación:
Requiere . Con la media no está definida, lo cual es coherente con que el paseo aleatorio no sea estacionario.
2. Varianza. Conviene trabajar con el proceso centrado, , que cumple .
Tomando varianzas, y usando que y son independientes —el shock de hoy no puede afectar al pasado—:
Por estacionariedad, :
Requiere para que sea positiva y finita: es exactamente la condición de estacionariedad del AR(1).
3. Autocorrelaciones. Multiplicando por y tomando esperanzas:
Para , el último término es cero: es incorrelado con todo el pasado. Queda la ecuación de Yule-Walker:
Aplicándola recursivamente desde :
La ACF de un AR(1) decae geométricamente, y ese es exactamente el patrón que permitió identificar la serie del ejemplo resuelto. Si , decae siempre positiva; si , alterna de signo.
4. El límite . Las tres expresiones se rompen a la vez:
Interpretación de cada una:
- La media deja de existir: el proceso no tiene ningún nivel al que volver.
- La varianza se hace infinita: la serie puede alejarse indefinidamente.
- La ACF no decae: el proceso recuerda para siempre. Un shock de hace veinte años sigue plenamente presente.
Con el proceso es exactamente el paseo aleatorio del ejercicio 1, y la ACF teórica vale 1 en todos los retardos. En la práctica, la ACF estimada de un paseo aleatorio decae lentamente por razones muestrales, y ese decaimiento lento es lo que se observó en la serie C del ejercicio anterior.
Conclusión. es la frontera entre un proceso con memoria finita y uno con memoria infinita. Detectar de qué lado está una serie es el problema de las raíces unitarias, y ocupa el tema 38 entero.
7. Qué desbloquea
Necesitas antes:
- Variables aleatorias discretas y continuas; esperanza y varianza — tema 22
- Transformaciones: operador retardo, diferencia regular y estacional, medias móviles — tema 36
Te abre la puerta a:
8. Recursos externos
- eknowmetrics — curso de ARIMA. Su tratamiento de proceso estocástico, ruido blanco, estacionariedad y ergodicidad encaja exactamente con este tema, y viene con prácticas en Gretl.
- Apuntes Box-Jenkins de Rafael de Arce y Ramón Mahía (UAM). Autocovarianzas y ACF con las deducciones hechas.
- estadistica.net — PDF de modelos ARIMA. Explica el uso de la ACF y la PACF en la fase de identificación, con ejemplos de correlogramas.
- Gretl.
Variable → Correlogramadibuja ACF y PACF con las bandas de significación y da directamente el estadístico de Ljung-Box para cada retardo. Merece la pena simular un AR(1) y un MA(1) conAñadir → Serie aleatoriay comparar sus correlogramas: las firmas del cuadro se ven de inmediato.