Chaines de Markov, chapitre 3
Chapitre 3
Mesures stationnaires
et théorèmes de convergence
Christiane Cocozza-Thivent, Universit´
e de Marne-la-Vall´
ee – p.1
I. Mesures stationnaires
Christiane Cocozza-Thivent, Universit´
e de Marne-la-Vall´
ee – p.2
I. Mesures stationnaires
Définition : Une probabilité πsur Eest invariante ou stationnaire pour
la chaine de Markov (Xn)n≥0si, pour tout n≥0:
(∀x∈E, P(Xn=x) = π(x)) =⇒(∀x∈E, P(Xn+1 =x) = π(x)).
Christiane Cocozza-Thivent, Universit´
e de Marne-la-Vall´
ee – p.2
I. Mesures stationnaires
Définition : Une probabilité πsur Eest invariante ou stationnaire pour
la chaine de Markov (Xn)n≥0si, pour tout n≥0:
(∀x∈E, P(Xn=x) = π(x)) =⇒(∀x∈E, P(Xn+1 =x) = π(x)).
Proposition 1 : La probabilité πest stationnaire si et seulement si :
∀y∈E, X
x∈E
π(x)p(x, y) = π(y).
Christiane Cocozza-Thivent, Universit´
e de Marne-la-Vall´
ee – p.2
I. Mesures stationnaires
Définition : Une probabilité πsur Eest invariante ou stationnaire pour
la chaine de Markov (Xn)n≥0si, pour tout n≥0:
(∀x∈E, P(Xn=x) = π(x)) =⇒(∀x∈E, P(Xn+1 =x) = π(x)).
Proposition 1 : La probabilité πest stationnaire si et seulement si :
∀y∈E, X
x∈E
π(x)p(x, y) = π(y).
En fait πest stationnaire si et seulement si, lorsque la loi initiale de la
chaine est π(c’est-à-dire si P(X0=x) = π(x)pour tout x)alors, pour
tout instant n, la loi de Xnest également π(c’est-à-dire
P(Xn=x) = π(x)pour tout x).
Christiane Cocozza-Thivent, Universit´
e de Marne-la-Vall´
ee – p.2
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
1
/
85
100%
