CHAÎNES DE MARKOV.
Alexandre Popier
ENSAI, Bruz
http://www.univ-lemans.fr/∼apopier
Janvier-Mars 2011
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 1 / 51
PLAN
1INTRODUCTION
2DÉFINITIONS
3CLASSIFICATION DES ÉTATS
4CAS PARTICULIER :ESPACE D’ÉTATS EFINI
5CHAÎNES DE MARKOV IRRÉDUCTIBLES RÉCURRENTES
6CHAÎNES IRRÉDUCTIBLES RÉCURRENTES POSITIVES ET
APÉRIODIQUES
7CHAÎNES SIMPLEMENT IRRÉDUCTIBLES
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 2 / 51
SUITES RÉCURRENTES ALÉATOIRES.
DÉFINITION
Une suite récurrente aléatoire sur un espace E est une suite de v.a.
(Xn)n∈Nà valeurs dans E définie sur un espace de probabilité (Ω,F,P)
solution d’une équation récurrente de la forme :
Xn+1=f(θn+1,Xn)
où
1θ1, θ2, . . . sont des v.a. i.i.d. à valeurs dans Θ;
2f: Θ ×E→E est une application mesurable ;
3X0(la condition initiale) est une v.a. (éventuellement déterministe)
indépendante de la suite (θi)i∈N∗.
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 3 / 51
BATTRE LES CARTES.
IE: ensemble des permutations (d’un jeu de 52 cartes), de
cardinal 52!;
IΘ: un sous-ensemble de E;
IX0=e: identité (les cartes sont ordonnées), Xn+1=θn+1◦Xn.
HYPOTHÈSES :
Θest mélangeant, i.e. engendre E;
la loi des θicharge tous les éléments de Θ.
THÉORÈME
La suite (Xn)est récurrente, satisfait une loi des grands nombres :
lim
n→+∞
1
n
n
X
k=1
1Xk=x=1
52!.
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 4 / 51
BATTRE LES CARTES :COMBIEN DE FOIS ?
THÉORÈME
La suite (Xn)est récurrente, satisfait une loi des grands nombres :
lim
n→+∞
1
n
n
X
k=1
1Xk=x=1
52!.
IOn a une asymptote de type exponentiel (condition de Doeblin) :
1
2X
x∈E
P(Xn=x)−1
52!≤Cρn,avec ρ < 1.
IDiaconis a montré qu’il suffit de battre le jeu 7 fois !
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 5 / 51
1 / 56 100%
La catégorie de ce document est-elle correcte?
Merci pour votre participation!

Faire une suggestion

Avez-vous trouvé des erreurs dans l'interface ou les textes ? Ou savez-vous comment améliorer l'interface utilisateur de StudyLib ? N'hésitez pas à envoyer vos suggestions. C'est très important pour nous!