Fiche de TD Proba Avancée Licence3 - 2020 2022

1
Exercice 1 : Un contrat d’assurance automobile comporte trois tarifs de cotisation annuelle : Bas, Intermédiaire,
Haut. La première année, l’assuré paye le tarif intermédiaire. S’il n’a pas été responsable d’un accident pendant une
année, il passe au tarif inférieur l’année suivante (s’il est déjà au tarif bas, il y reste). S’il a été responsable d’un
accident au cours d’une année, il passe au tarif supérieur l’année suivante (s’il est déjà au tarif haut, il y reste). La
compagnie d’assurance estime à 10 pour cent la probabilité qu’un assuré pris au hasard soit responsable d’un
accident au cours d’une année. Ici, la variable aléatoire  qui décrit la situation l’année n prend ses valeurs dans
{1, 2, 3} où « 1 » désigne le tarif Bas, « 2 » l’Intermédiaire et « 3 » le tarif Haut.
1) Montrer que la suite  définit une chaine de Markov ;
2) Déterminer la matrice de transition des états ; puis donner le graphe associé à cette chaine de Markov ;
3) Quel est la probabilité pour qu’un assuré au tarif intermédiaire devienne un assuré au tarif bas dans trois
ans ?
4) Déterminer les différentes classes de cette chaine et préciser leurs natures (récurrente, transitoire, fermée) ;
5) Calculer la probabilité et le temps moyen d’absorption dans classes fermées.
Exercice 2 :
1) En utilisant les propriétés d’une matrice de transition, montrer que si  est la matrice de transition en
deux pas d’une chaîne de Markov à temps discret sur deux états, 0 et 1, alors les entrées dans la première
colonne de cette matrice satisfont l’inégalité : 
2) Soit  un processus aléatoire tel que   . Démontrer que le processus  est une
chaine de Markov si et seulement si, pour tous les états      ,
Université Omar Bongo
Faculté de Droit et des Sciences Economiques
Licence 3 Economie- Parcours EME
Année 2021-2022
Travaux dirigés-Probabilités Avancées
Chargé du Cours : Dr. NGOUFACK Françoise

2
Exercice 3: Déterminer les classes d’états transientes, récurrentes, périodiques (dans ce cas donner leur période)
et ergodique de la chaîne de Markov sur les états 0, 1, …, dont la matrice de transition est :
(a)
0
2
1
2
1
00
10000
01000
0
2
1
00
2
13
1
0
3
1
3
1
0
P
; (b)
2
1
2
1
00000 2
1
0
2
1
0000
0100000
00
2
1
000
2
13
1
00
3
1
00
3
10000100 4
1
4
1
4
1
00
4
1
0
P
Justifier brièvement vos affirmations.
Exercice4 : On considère la chaîne de Markov dont le graphe est le suivant :
1) Determiner les classes de cette chaîne ;
2) Determiner les états recurrents et transients ;
3) Déterminer les différentes classes closes ou circuits ou cycles ;
4) Determiner la période de chaque état de la chaîne de Markov ;
5) Calculer la probabilité d’atteinte de l’état 6, partant de l’état 0 ;
6) Calculer la probabilité d’atteinte de l’état 3, partant de l’état 1 ;
7) Calculer le temps moyen d’atteinte de l’état 3 partant de l’état 1 ;
8) Calculer : 
Exercice 4: Une chaîne de Markov sur trois états, disons 0, 1 et 2, a comme matrice de transition :
2
1
0
2
1010
0
4
3
4
1
P
a) Déterminer le graphe de cette chaine
b) Déterminer les classes d’états et leur type (transiente, récurrente, périodique ou apériodique) ;
c) Existe-t-il une loi stationnaire ? Si oui, qu’elle est-elle ? Sinon, pourquoi ?
d) Déterminer s’il y a lieu, les probabilités d’absorption dans les classes fermées ;
e) Déterminer s’il y a lieu, les temps moyens d’absorption dans les classes fermées ;

3
f) Déterminer la matrice de transition en  pas ; puis sa limite lorsque  tend vers l’infini.
Exercice 5 : Une chaîne de Markov sur les états 0, 1, 2, 3 et 4, a comme matrice de transition :
00001
01000
00
4
3
4
1
0
00
2
1
2
1
04
1
4
1
2
1
00
P
Déterminer les limites des probabilités de transitions en  pas suivantes :
Exercice 6:Une chaîne de Markov sur les états 0, 1, 2, 3 et 4 a comme matrice de transition :
0
4
1
4
1
4
1
4
14
1
0
4
1
4
1
4
100
3
2
3
1
0
00
3
2
0
3
1000
3
2
3
1
P
Déterminer les classes d’états et leur type (transiente, récurrente, périodique ou apériodique) ; puis calculer
Exercice 7 : Une chaîne de Markov sur les états 0, 1, 2, 3 et 4 a comme matrice de transition :
3
1
3
2
000 3
2
3
1
000
00100 4
1
0
4
1
0
2
10
3
1
3
1
3
1
0
P
Déterminer les classes d’états et leur type (transiente, récurrente, périodique ou apériodique) ; puis la limite
lorsque n tend vers l’infini de la probabilité de transition de 0 à 4 en n pas, 
, si la limite existe.