CHAÎNES DE MARKOV.
Alexandre Popier
ENSAI, Bruz
http://www.univ-lemans.fr/apopier
Janvier-Mars 2011
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 1 / 51
PLAN
1INTRODUCTION
2DÉFINITIONS
3CLASSIFICATION DES ÉTATS
4CAS PARTICULIER :ESPACE DÉTATS EFINI
5CHAÎNES DE MARKOV IRRÉDUCTIBLES RÉCURRENTES
6CHAÎNES IRRÉDUCTIBLES RÉCURRENTES POSITIVES ET
APÉRIODIQUES
7CHAÎNES SIMPLEMENT IRRÉDUCTIBLES
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 2 / 51
SUITES RÉCURRENTES ALÉATOIRES.
DÉFINITION
Une suite récurrente aléatoire sur un espace E est une suite de v.a.
(Xn)nNà valeurs dans E définie sur un espace de probabilité (Ω,F,P)
solution d’une équation récurrente de la forme :
Xn+1=f(θn+1,Xn)
1θ1, θ2, . . . sont des v.a. i.i.d. à valeurs dans Θ;
2f: Θ ×EE est une application mesurable ;
3X0(la condition initiale) est une v.a. (éventuellement déterministe)
indépendante de la suite (θi)iN.
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 3 / 51
BATTRE LES CARTES.
IE: ensemble des permutations (d’un jeu de 52 cartes), de
cardinal 52!;
IΘ: un sous-ensemble de E;
IX0=e: identité (les cartes sont ordonnées), Xn+1=θn+1Xn.
HYPOTHÈSES :
Θest mélangeant, i.e. engendre E;
la loi des θicharge tous les éléments de Θ.
THÉORÈME
La suite (Xn)est récurrente, satisfait une loi des grands nombres :
lim
n+
1
n
n
X
k=1
1Xk=x=1
52!.
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 4 / 51
BATTRE LES CARTES :COMBIEN DE FOIS ?
THÉORÈME
La suite (Xn)est récurrente, satisfait une loi des grands nombres :
lim
n+
1
n
n
X
k=1
1Xk=x=1
52!.
IOn a une asymptote de type exponentiel (condition de Doeblin) :
1
2X
xE
P(Xn=x)1
52!Cρn,avec ρ < 1.
IDiaconis a montré qu’il suffit de battre le jeu 7 fois !
A. Popier (ENSAI) Chaînes de Markov. Janvier-Mars 2011 5 / 51
1 / 56 100%
La catégorie de ce document est-elle correcte?
Merci pour votre participation!

Faire une suggestion

Avez-vous trouvé des erreurs dans linterface ou les textes ? Ou savez-vous comment améliorer linterface utilisateur de StudyLib ? Nhésitez pas à envoyer vos suggestions. Cest très important pour nous !