1.
Tous les états communiquent (la chaîne est irréductible) et apériodique (Pii>0 pour tout i). Nature : chaîne ergodique.
2.
P(f→m)=Pfm=0,2.
0,2
3.
(P2)fl=0,1×0,6+0,2×0,15+0,7×0,1=0,06+0,03+0,07=0,16.
0,16
4.
Premier passage de f à l en 2 étapes : on ne passe pas par l à l'étape 1.
ffl(2)=PfmPml+PffPfl=0,2×0,15+0,7×0,1=0,03+0,07=0,10.
Mais il faut exclure le passage direct par l : Pfl=0,1 donc premier passage en 2 = (P2)fl−Pfl⋅Pll... En fait, ffl(2)=(P2)fl−PflPll=0,16−0,1×0,6=0,10.
0,10
5.
P(X1=l,X2=m,X3=f∣X0=f)=Pfl⋅Plm⋅Pmf=0,1×0,4×0,2=0,008.
0,008
6.
π(1)=π(0)P=(0,5×0,6+0,4×0,15+0,1×0,1,…)=(0,37,0,48,0,15).
π(1)=(0,370,480,15)
7.
La chaîne est ergodique, donc π(n)→π∗ avec π∗P=π∗. En résolvant le système : 0,6π1+0,15π2+0,1π3=π1, etc., on obtient la distribution stationnaire.
Oui, il existe une distribution limite π∗