mathématiques appliquées (ECG 2e année) · Chapitre 10 · Exercice
Une chaîne qui n'oublie pas son départ
Chaînes de Markov · Comportement limite et vitesse · niveau 3 (difficile)
Énoncé
Soit . Déterminer tous les états stables et le comportement de .
Corrigé
États stables. est vérifié pour tout vecteur : ne change rien. Tout vecteur de probabilité est donc stable — il y en a une infinité.
Évolution. pour tout : la chaîne ne bouge jamais.
Ce que l'exemple montre. L'unicité de l'état stable n'est pas automatique. Elle demande que le graphe permette d'aller de tout état à tout autre — ce qui est manifestement faux ici, les deux états étant isolés l'un de l'autre.
Le critère pratique. Si un coefficient de est nul dans les deux sens entre deux groupes d'états, la chaîne se scinde et l'unicité tombe.
Exercices semblables
- Un équilibre à trois états corrigé
- Un état absorbant corrigé
- Vitesse de convergence corrigé
- Les deux valeurs propres d'une matrice de transition corrigé
- Ce que devient la puissance corrigé