Adloun

mathématiques appliquées (ECG 2e année) · Chapitre 10 · Exercice

Une chaîne qui n'oublie pas son départ

Chaînes de Markov · Comportement limite et vitesse · niveau 3 (difficile)

Énoncé

Soit . Déterminer tous les états stables et le comportement de .

Corrigé

États stables. est vérifié pour tout vecteur : ne change rien. Tout vecteur de probabilité est donc stable — il y en a une infinité.

Évolution. pour tout : la chaîne ne bouge jamais.

Ce que l'exemple montre. L'unicité de l'état stable n'est pas automatique. Elle demande que le graphe permette d'aller de tout état à tout autre — ce qui est manifestement faux ici, les deux états étant isolés l'un de l'autre.

Le critère pratique. Si un coefficient de est nul dans les deux sens entre deux groupes d'états, la chaîne se scinde et l'unicité tombe.

Exercices semblables

Le cours du chapitre · Tous les exercices du chapitre