Documente Academic
Documente Profesional
Documente Cultură
Probabilităţi f
Probabilităţi şi Statistică
Pşi Statistică = j
Probabilităţi şi Statistică
Xn +1 s X1Probabilităţi= =
si1 ; Xşi2Statistică = g=
Probabilităţi şi Statistică
si2 ; : : : ; XProbabilităţi
n sin şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică = f
PProbabilităţi = j
şi Statistică
Xn +şi1Statistică
Probabilităţi = g
s Xn siProbabilităţi
n
Probabilităţi şi Statistică
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(ii) Un şilanţ
Probabilităţi Statistică se numeşte
MarkovProbabilităţi şi Statisticăomogen (sau staţionar)
Probabilităţi şi Statistică
Probabilităţi
dacă şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi f
P şi X = j
Statistică
n +1 = g= f
sj XnProbabilităţi
si şi Statistică
P Xn sj X = j = g=
Probabilităţi
n 1 pij ;
sşii Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
8 >
Probabilităţi şi Statistică
n 2; si ; sj S : 2 Probabilităţi şi Statistică
Lanţuri Markov discrete
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
În celeşi Statistică
ce urmeazăProbabilităţi
Probabilităţi şi Statistică
şi Statistică doar lanţuri
vom considera
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Markov omo-
Probabilităţi şi Statistică
gene,
Probabilităţi discrete şi cuProbabilităţi
şi Statistică un număr finit de stări.
şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
S este spaţiul stărilor,
Probabilităţi şi Statistică
Probabilităţi şi Statistică
iar pij probabilităţile
Probabilităţi şi Statistică
Probabilităţi şi Statistică
de tranziţie,
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
matricea formată cu aceste probabilităţi P şi Statistică =( )6 6
Probabilităţi
pij şi1 Statistică
i ;j m
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
se numeşte matricea
Probabilităţi şi Statistică de tranziţie probabilistă
Probabilităţi şi Statistică a lanţului.
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Un Probabilităţi
astfel deşi lanţ Markov Probabilităţi
Statistică se identifică prin:
şi Statistică Probabilităţi şi Statistică
=f g
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
-Probabilităţi
spaţiul şistărilor
Statistică S s1 ; s2 ; : : :şi;Statistică
Probabilităţi sm Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
-Probabilităţi
şi probabilităţile
şi Statistică pij de trecereşi Statistică
Probabilităţi dintr-o stareProbabilităţi
în alta. şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Un lanţ Markov Probabilităţi
Probabilităţi şi Statistică
Probabilităţi şi Statistică
poate fişi reprezentat
Statistică
Probabilităţi şi Statistică
printr-un digraf al
Probabilităţi şi Statistică
Probabilităţi
tranziţiilor şi Statistică Probabilităţi
probabiliste: şi Statistică
nodurile sunt stăriProbabilităţi
posibile,şi Statistică
iar în-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
tre acestea
Probabilităţi avem arceProbabilităţi
şi Statistică cu probabilităţile
şi Statistică corespunzătoare de
Probabilităţi şi Statistică
Probabilităţi şi Statistică
tranziţie. Probabilităţi şi Statistică Probabilităţi şi Statistică
Lanţuri Markov discrete - exemple
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Exemplu.
Probabilităţi Alice urmează
şi Statistică un şicurs
Probabilităţi de săptămânal
Statistică deStatistică
Probabilităţi şi "Teoria
Probabilităţi şi Statistică Probabilităţi şi Statistică
probabilităţilor", în fiecare săptămână ea fie rămâne în urmă, Probabilităţi şi Statistică
fie
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
ajunge la zi cu materia
Probabilităţi şi Statistică corespunzătoare.
Probabilităţi şi Statistică Dacă într-o săptămână
Probabilităţi şi Statistică
Probabilităţi
este în urmă şi Statistică
cu materia, Probabilităţi
atunci şi Statistică
probabilitatea Probabilităţi
ca ea şisăStatistică
rămână
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
în urmă şi în săptămâna
Probabilităţi şi Statistică următoare este
Probabilităţi şi Statistică 0 :4, iar probabilitatea
Probabilităţi şi Statistică
Probabilităţi
ca ea să ajungă şi Statistică Probabilităţi
la zi cu materia este 0:6. Dacă într-o
şi Statistică Probabilităţi şi Statistică
săptămână
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Alice este laşizi
Probabilităţi cu materia,Probabilităţi
Statistică atunci probabilitatea
şi Statistică ca ea să şirămână
Probabilităţi Statistică
Probabilităţi şi Statistică
în urmă în săptămâna
Probabilităţi şi Statistică
Probabilităţi şi Statistică
următoare este 0 :
Probabilităţi şi Statistică
2, Probabilităţi şi Statistică
iar cea ca să fie la zi
Probabilităţi şi Statistică
şi în săptămâna
Probabilităţi şi Statistică următoare :8.
esteşi 0Statistică
Probabilităţi Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Avem un lanţ omogen Markov
Probabilităţi şi Statistică
şi discret cu două
Probabilităţi şi Statistică
stări posibile: s
Probabilităţi şi Statistică 1
Probabilităţi
- Alice e la zişi cuStatistică
materia şi Probabilităţi
s2 - ea a şirămasStatistică
în urmă.Probabilităţi şi Statistică
Probabilităţile
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
de tranziţie sunt
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţipşi11 =
Statistică
Probabilităţi şi Statistică
=
0:8; p12 Probabilităţi =
0:2; p21şi Statistică = |
0:6; p22 0Probabilităţi
Probabilităţi şi Statistică
:4 şi Statistică
Probabilităţi şi Statistică
Lanţuri Markov discrete - exemple
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
ProbabilităţiO
Exemplu. şi Statistică
albină se mişcă Probabilităţi
pe o şilinie
Statistică Probabilităţi
dreaptă câte şi Statistică
o unitate în
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
fiecare interval
Probabilităţi de timp astfel:
şi Statistică la stânga
Probabilităţi şi Statisticăcu probabilitate 0:3, la
Probabilităţi şi Statistică
Probabilităţi şi Statistică
dreapta cu probabilitate
Probabilităţi şi Statistică
0 :
Probabilităţi şi Statistică
3 şi rămâne pe
Probabilităţi şi Statistică
loc Probabilităţi şi Statistică
cu probabilitate 0 :4
Probabilităţi şi Statistică
independent
Probabilităţi de mişcările
şi Statistică făcuteşianterior.
Probabilităţi Statistică DoiProbabilităţi
paianjeni se află pe
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
această dreaptă în poziţiile
Probabilităţi şi Statistică
1 şi m. Dacă albina
Probabilităţi şi Statistică
ajunge într-unul
Probabilităţi şi Statistică
dinProbabilităţi
aceste puncte şi Statisticăprocesul Probabilităţi
se încheie.şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Construim
Probabilităţi un lanţ Markov
şi Statistică presupunând
Probabilităţi şi Statisticăcă albina se găseşte
Probabilităţi in-
şi Statistică
Probabilităţi
iţial într-un şi Statistică
punct între Probabilităţi
1 şi m şi(pe Statistică
o coordonată Probabilităţi şi Statistică
întreagă).
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statisticăsunt 1; Probabilităţi
Stările lanţului 2; : : : ; mşi-Statistică
poziţiile albinei. Probabilităţile
Probabilităţi şi Statistică
Probabilităţi şi Statistică
de tranziţie nenule sunt: Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică =
p11 pşimm
Probabilităţi =
Statistică1; Probabilităţi şi Statistică
(
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
0 : 3;
Probabilităţi şi Statistică
= dacă
pij Probabilităţi şi Statistică
2f
j i 1 ; i+ g 1 ;
Probabilităţi şi Statistică Probabilităţi şi Statistică
=
; pentruProbabilităţi
Probabilităţi şi Statistică i 2; mşi Statistică |
=
Probabilităţi şi0:Statistică
4; j i Probabilităţi şi Statistică
1
Probabilităţi şi Statistică
Probabilităţile unui drum şi ale tranziţiilor în n paşi
Probabilităţi şi Statistică
Dat unşi lanţ
Probabilităţi Statistică
Probabilităţi şi Statistică
Markov Probabilităţi
putem determina
şi Statistică
Probabilităţi şi Statistică
probabilitatea unei
Probabilităţi şi Statistică
Probabilităţi
secvenţeşi Statistică
de stări Probabilităţi
viitoare şiale Statistică
lanţului folosindProbabilităţiformula
şi Statistică de
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
înmulţire.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Proposition şi Statistică1 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Dat un lanţ
Probabilităţi şi Statistică ( )2
Xi i N ,şi Statistică
Markov Probabilităţi avem Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
P Xf =
Probabilităţi şi Statistică
1
Probabilităţi 2 =
si1 ;şiXStatistică = g= (
Probabilităţi şi Statistică
si2 ; : : : ; Probabilităţi
Xn sinşi Statistică = )
P X1 sProbabilităţi
i1 pi1 i2 p
Probabilităţi şi Statistică
2 i3 : : : pin
şi iStatistică 1 in
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
proof: şi Statistică
Probabilităţi Probabilităţi şi Statistică Probabilităţi şi Statistică
f =
P X1 şisiStatistică
Probabilităţi =
1 ; X2 = g = ( = ) ( = j
Probabilităţi şi Statistică Probabilităţi şi Statistică
si2 ; :Probabilităţi
: : ; Xn şi sStatistică
in
Probabilităţi şi Statistică
si1 PşiX
P X1 Probabilităţi Statistică
2 si2 X1 =s
f = j = g=
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
::: P
Probabilităţi şi Statistică = 1=
Xn sin XProbabilităţi si1 ; X si2 ; : : : ; XProbabilităţi
şi 2Statistică n 1 sişin Statistică
1
= ( = )
Probabilităţi şi Statistică
P X1 Probabilităţi
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
pi2 i3 : : : pProbabilităţi
si1 pi1şii2Statistică in 1 in ; şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
utilizândşiformula
Probabilităţi Statistică de înmulţire
Probabilităţi şi cea a lui Markov.
şi Statistică Pentru
Probabilităţi a cal-
şi Statistică
cula această probabilitate trebuie cunoscută distribuţia pasului
iniţial, X .
Probabilităţile unui drum şi ale tranziţiilor în n paşi
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
În multe
Probabilităţi problemeProbabilităţi
şi Statistică asociateşilanţurilor
Statistică Markov esteşinecesar
Probabilităţi Statistică să
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
cunoaştem
Probabilităţi şi Statistică
distribuţia unei stări viitoare
Probabilităţi şi Statistică
în funcţie de starea
Probabilităţi şi Statistică
Probabilităţi
curentă.şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Definition
Probabilităţi 3
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţile tranziţiilorProbabilităţi
în nşi Statistică
paşi sunt Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică rij = f
(n )
= j
P Xn +şi1 Statistică
Probabilităţi = g :
sj X1 siProbabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Datorităşi Statistică
omogenităţii
Probabilităţi şi Statistică
(n )
Probabilităţi
rij şieste Statistică Probabilităţi
probabilitatea
Probabilităţi şi Statistică
şi Statistică
ca după n paşi
Probabilităţi şi Statistică
starea
Probabilităţi să devină sProbabilităţi
şi Statistică j , dacă şistarea
StatisticăiniţialăProbabilităţi
este si şi(indiferent
Statistică
Probabilităţi şi Statistică
care este momentul iniţial: rij
Probabilităţi şi Statistică
Probabilităţi (şi
= f
)
n Statistică
Probabilităţi şi Statistică
= j = g
P Xn +k sj Xk şi Statistică
Probabilităţi si ).
Probabilităţi şi Statistică
Aceste probabilităţi
Probabilităţi şi Statistică se pot calcula folosind
Probabilităţi şi Statistică ecuaţia recursivă
Probabilităţi şi Statistică
Probabilităţi
de mai şi Statistică
jos. Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţile unui drum şi ale tranziţiilor în n paşi
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Proposition 2 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(Ecuaţia Chapman-Kolmogorov)
Probabilităţi şi Statistică Probabilităţi şiProbabilităţile
Statistică tranziţiilor
Probabilităţi în
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
n paşi pot fi calculate
Probabilităţi şi Statistică
folosind următoarea
Probabilităţi şi Statistică
formulă recursivă
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
X şi(nStatistică
m
(n Probabilităţi
rij
)
=
Probabilităţi rik
şi Statistică
1)
pkj ; Probabilităţi >
pentru nşi Statistică 6
Probabilităţi şi Statistică
6 Probabilităţi şi Statistică
2; 1 i ; j Probabilităţi
m ; unde
(1)
rij
şi Statistică = pij :
Probabilităţi
k =1 şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
proof: Aplicăm varianta condiţionată a probabilităţii şi Statistică Probabilităţi şi Statistică
totale:
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţimşi Statistică Probabilităţi şi Statistică
X
f
Probabilităţi nşi+ = j
Probabilităţi şi Statistică
P X s
Statistică
1 j X = g= s
1 Probabilităţi
i f
Probabilităţi şi Statistică
P X = j
şi Statisticăn s = g
Probabilităţi şi Statistică
X1 si şi Statistică
k Probabilităţi
Probabilităţi şi Statistică Probabilităţi şi Statistică
k =1 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
f
Probabilităţi şi Statistică
1= j
Probabilităţi şi StatisticăP Xn +Probabilităţi =
sj Xşin Statistică = g=
sk ; X1 sProbabilităţi
Probabilităţi şi Statistică
i şi Statistică
Probabilităţi şi Statistică
Xm
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şiXm
Statistică
= f
Probabilităţi = j
P Xnşi Statistică
Probabilităţi şi Statistică
= g f
sk X1 si Probabilităţi = j
P Xn +şi1Statistică
Probabilităţi şi Statistică
= g=
sj Xn sProbabilităţi
k
(n 1)
ik
Probabilităţi şi Statistică
şirStatistică pkj :
k =1 k =1
Probabilităţile unui drum şi ale tranziţiilor în n paşi
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Matricea pătraticăProbabilităţi
Probabilităţi şi Statistică
(n )
Probabilităţi şi Statistică
de ordin cuProbabilităţi
m formatăProbabilităţi
şi Statistică
şi Statistică
probabilităţile
şi Statistică
Probabilităţi
rij (pentru şi Statistică Probabilităţi
un n fixat) se numeşteşi Statistică
matriceaProbabilităţi şi Statistică
probabilităţilor
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
de tranziţie
Probabilităţi şi Statisticăîn n paşi.
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Din ecuaţia Chapman-Kolmogorov Probabilităţi şi Statistică
Probabilităţi şi Statistică
se poate obţine urmă-
Probabilităţi şi Statistică
torulşi Statistică
Probabilităţi rezultat (a cărui demonstraţie
Probabilităţi şi Statistică este Probabilităţi
lăsată caşiexerciţiu).
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Proposition 3
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Matricea probabilităţilor
Probabilităţi şi Statistică
de tranziţie în
Probabilităţi şi Statistică
n paşi este P n , unde
Probabilităţi şi Statistică
Probabilităţi şi Statistică probabilităţilor
P este matricea Probabilităţi şi Statistică
de tranziţie. Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Aceste matrici
Probabilităţi de tranziţie
şi Statistică sunt şimatrici
Probabilităţi Statistică stochastice:
Probabilităţiau elemente
şi Statistică
care reprezintă probabilităţi şi suma elementelor de peşi fiecare
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
linieProbabilităţi
este 1. şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Sunt anumite
Probabilităţi
Probabilităţi şi Statistică
şi Statistică situaţii în careşi Statistică
Probabilităţi
Probabilităţi(şin )Statistică
probabilităţile rij şiconverg
Probabilităţi Statistică
Probabilităţi
pentru n ! +1
şi Statistică
Probabilităţi şi Statistică
, Probabilităţi
idiferentşide Statistică
starea iniţială
Probabilităţi şi Statistică
Probabilităţi
i . şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Exemplu (continuare)
Probabilităţi şi Statistică
Reluăm exemplul
Probabilităţi şi Statistică
cu lanţul Markov de
Probabilităţi şi Statistică
Probabilităţi
mai sus care şi Statistică
are matricea Probabilităţi şi Statistică
probabilităţilor de Probabilităţi
tranziţieşi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
" şi Statistică #
Probabilităţi "
Probabilităţi şi Statistică# "Probabilităţi
Probabilităţi
şi Statistică
şi Statistică #
0:8 0:2 0:76 0şi:24 0:752 0şi:Statistică
=
P Probabilităţi şi Statistică
Probabilităţi0:şi6Statistică
0:4
=
; P 2 Probabilităţi
Probabilităţi
0:72 0:28
şi
Statistică
Statistică
=
; P 3 Probabilităţi
Probabilităţi
0:744 0:256
şi
248
Statistică
;
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică " şi Statistică
Probabilităţi #
Probabilităţi şi Statistică
0:7500 0:2502 Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică 10 Probabilităţi
= 0:7508
şi Statistică
; PProbabilităţi şi Statistică :
Probabilităţi şi Statistică
0:2505 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Se observă
Probabilităţi că matricea deProbabilităţi
şi Statistică tranziţie în n paşi tinde
şi Statistică la o şimatrice
Probabilităţi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
constantă, fără ca starea iniţială i să conteze (coloane constante). Probabilităţi şi Statistică
| Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Exempluşi Statistică
Probabilităţi (continuare)Probabilităţi
Reluămşi exemplul
Statistică cu Probabilităţi
albina şişicei doi pa-
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
ianjeni.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
2
Probabilităţi şi Statistică 3
Probabilităţi 2
şi Statistică Probabilităţi şi Statistică 3
:0Statistică
Probabilităţi1şi 0 0 Probabilităţi
0 şi Statistică 1:0 Probabilităţi
0 şi Statistică
0 0
6 0:3 şi0Statistică
Probabilităţi 7
Probabilităţi
:4 0:3 Probabilităţi 6
şi Statistică Probabilităţi şi Statistică 7
= 6 0 7 şi20Statistică
= 6 0:669 Probabilităţi
0:0004 şi0Statistică
:0004 0:329 7
P 6 şi Statistică
Probabilităţi 7;P 6 7
Probabilităţi :3 0:4 0:3 Probabilităţi
4 0 şi0Statistică 5 4 0:329 0:0004
şi Statistică 0:0004
Probabilităţi 0:669
şi Statistică 5
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
0 şi Statistică
Probabilităţi 0 0 1:0 Probabilităţi şi Statistică0 0
Probabilităţi şi0Statistică1:0
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţişişi în
Observăm Statistică
acest caz căProbabilităţi
(aparent) şi Statistică
există limiteProbabilităţi şi Statistică
ale anumitor
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
probabilităţi de tranziţie în
Probabilităţi şi Statistică n paşişicare
Probabilităţi depind de
Statistică starea şiiniţială:
Probabilităţi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
! 1
(n )
=
Probabilităţi şi Statisticăn + Probabilităţi
1; lim
lim r11 Probabilităţi
! 1
(n )
şi Statistică
r21
şin Statistică
+
= 2=3Probabilităţi
; şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
! 1
Probabilităţi şi Statistică
n +
(n )
= şi Statistică
1=3; şilim
lim r31 Probabilităţi
! 1
n +
(n ) Probabilităţi şi Statistică
r41
Statistică = :
0Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Clasificarea pe care
Probabilităţi şi Statistică
oProbabilităţi
vom daşi stărilor
Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
priveşte frecvenţa pe
Probabilităţi şi Statistică
temen lung
Probabilităţi cu care ele
şi Statistică sunt vizitate.
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Definition
Probabilităţi 4
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(i) O stare
Probabilităţi sj este accesibilă
şi Statistică din starea Probabilităţi
Probabilităţi şi Statistică si dacăşiexistă Statistică un
Probabilităţi şi Statistică
număr
Probabilităţi >
Probabilităţi şi Statistică
de paşi, Probabilităţi
şi Statistică n 1,şi Statistică
astfel ca rijProbabilităţi fie A si ( )
(n ) Probabilităţi şi Statistică
> 0;şi Statistică
Probabilităţi
mulţimea şi Statistică
stărilor careProbabilităţi
sunt şiaccesibile
Statistică dinProbabilităţi
starea şisiStatistică
.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(ii)Probabilităţi
O stareşi Statistică
si este numită recurentă
Probabilităţi dacă pentru
şi Statistică orice
Probabilităţi stare
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
sj careşieste
Probabilităţi
accesibilă
Statistică
din s , si este de asemenea
Probabilităţi işi Statistică
acce-
Probabilităţi şi Statistică
sibilă
Probabilităţi din sj .
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(iii) O stare
Probabilităţi se numeşte
şi Statistică şi Statistică dacă Probabilităţi
tranzitorie
Probabilităţi nu este şirecurentă.
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Să observăm
Probabilităţi
Probabilităţi şi Statistică
şi Statisticăcă starea sj esteşi Statistică
Probabilităţi accesibilă din
Probabilităţi şi Statistică
si dacăşi Statistică
Probabilităţi există
Probabilităţi
un şir de stări si1 ;Probabilităţi
şi Statistică si2 ; : : : ; sşiinStatistică
1 astfel Probabilităţi şi Statistică
încât
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică ; pi1 i2 ; : : :şi;Statistică
pii1 Probabilităţi pin 1 j > 0; Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
altfel
Probabilităţi spus un drum
şi Statistică din starea
Probabilităţi si în starea
şi Statistică sj esteşi Statistică
Probabilităţi posibil.
Probabilităţi şi Statistică
Starea si este recurentă
Probabilităţi şi Statistică
Probabilităţi şi Statistică
dacă şi numai Probabilităţi
Probabilităţi şi Statistică
8
dacă sşijStatistică 2 ( )
Probabilităţi şi Statistică
A si
) 2 ( )
Probabilităţi
si şiA Statistică
sj . Dacă Probabilităţi
începemşiîn Statistică Probabilităţi
starea recurentă si şi, Statistică
atunci
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
probabilitatea
Probabilităţi şi Statistică de a reveni în starea
Probabilităţi şi Statistică i s în viitor este strict
Probabilităţi şi Statistică
Probabilităţi
pozitivăşi Statistică
(la fel ca şi Probabilităţi şi Statistică ca starea
probabilitatea Probabilităţi
si să şifie Statistică
vizitată
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
în viitor
Probabilităţi de o infinitate
şi Statistică de şiori).
Probabilităţi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Mai mult, dacă sProbabilităţi
Probabilităţi şi Statistică
Probabilităţi şi Statistică
i este recurentă,
şi Statistică
atunci As ( )= ( )
Probabilităţi şi Statistică
As ,
Probabilităţii şi Statistică j
Probabilităţi
pentru şiorice Statistică 2 ( )
sj A sProbabilităţi
i : plecând şi Statistică
din si rămânem ( )
Probabilităţiîn şiAStatistică
si .
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Definition 5
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Dacă si este o stare recurentă, Probabilităţi şi Statistică
atunci toate Probabilităţi
stărileşi accesibile
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
din si formează
Probabilităţi şi Statistică o clasă recurentă.
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Se poateşi Statistică
demonstra
Probabilităţi şi Statistică
Probabilităţi
cu uşurinţăşi Statistică
(exerciţiu):
Probabilităţi şi Statistică
Probabilităţi
clasele şi Statistică
recurente
Probabilităţi şi Statistică
suntşiclasele
Probabilităţi Statistică de echivalenţă relativ
Probabilităţi şi Statisticăla următoarea
Probabilităţirelaţie (care
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
este una de echivalenţă pe mulţimea stărilor recurente): si
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi
Statistică
Probabilităţi şi Statistică
sj dacăşiA
Probabilităţi ( )= ( )
si
Statistică A sj Probabilităţi
. şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Theorem
Probabilităţi 3.1
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
UnProbabilităţi
lanţ Markov şi Statistică
poate fiProbabilităţi
descompus şi Statistică
într-una Probabilităţi
sau maişi Statistică
multe
Probabilităţi şi Statistică
clase recurente
Probabilităţi şi un număr
şi Statistică >
Probabilităţi şi Statistică
( şi0)Statistică
Probabilităţi
Probabilităţi şi Statistică
de stări tranzitorii.
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Următoarele şi Statistică
Probabilităţi şi Statistică
Probabilităţi
proprietăţi şi Statistică
ale stărilor
Probabilităţi şi Statistică
Probabilităţi
sunt lăsate şi Statistică
ca exerciţiu.
Probabilităţi şi Statistică
Tipuri de stări
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Proposition
Probabilităţi şi Statistică4 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Considerăm
Probabilităţi un lanţ Markov
şi Statistică Probabilităţi omogen,
şi Statistică discret şi cu şioStatistică
Probabilităţi mulţime
Probabilităţi
finită de stări. şi Statistică
Atunci Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(i)Probabilităţi
O stare şi Statistică
recurentă este Probabilităţi şi Statistică din toate
accesibilă Probabilităţi şi Statistică
stările din
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
clasa sa şi, posibil,
Probabilităţi şi Statistică din alte stări
Probabilităţi şi Statistică tranzitorii, dar nu
Probabilităţi şi Statisticăşi
Probabilităţi şi Statistică Probabilităţi şi
din stări aflate într-o altă clasă recurentă. Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(ii) O stare
Probabilităţi tranzitorie
şi Statistică nu este
Probabilităţi accesibilăProbabilităţi
şi Statistică din nici o stare
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
recurentă.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(iii) Dintr-oşi Statistică
Probabilităţi stare tranzitorieProbabilităţi
esteşi Statistică
accesibilă cel Probabilităţi
puţin şioStatistică
stare
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
recurentă.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Definiţia
Probabilităţi dată clasei
şi Statistică
Probabilităţi şi Statistică
recurente
Probabilităţi
Probabilităţi şi Statistică
nu excludeProbabilităţi
şi Statistică existenţaşi Statistică
unei clase
Probabilităţi
formateşi dintr-o
Statistică singură
Probabilităţi
stare în şi Statistică
care intră o Probabilităţi
buclă şi din şi Statistică
care
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
nu mai iese nici un arc.
Tipuri de stări
Probabilităţi şi Statistică
Rezultatele
Probabilităţi şi Statistică
Probabilităţi şi Statistică
anterioareProbabilităţi
ne permit
Probabilităţi şi Statistică
argumentarea
şi Statistică unorşipropri-
Probabilităţi Statistică
Probabilităţi
etăţişi Statistică
ale acestor procese Probabilităţi
şişivizualizarea
Statistică Probabilităţi şi
evoluţiei Statistică
acestora:
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(i)Probabilităţi
dacă am intrat
şi Statistică
(sau chiar am început)
Probabilităţi şi Statistică
într-o stare recurentă,
Probabilităţi şi Statistică
atunci
Probabilităţi nu mai părăsim
şi Statistică Probabilităţiclasa acesteia şi
şi Statistică toate şistările
Probabilităţi Statistică din
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
această clasă vor fiProbabilităţi
Probabilităţi şi Statistică
vizitateşi de o infinitate
Statistică
de ori.
Probabilităţi şi Statistică
(ii)Probabilităţi
dacă starea iniţială este
şi Statistică una şitranzitorie
Probabilităţi Statistică atunci vomşi Statistică
Probabilităţi merge
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
printr-un număr finitProbabilităţi
Probabilităţi şi Statistică
de stărişi tranzitorii
Statistică
şi Probabilităţi
apoi vom intra,
şi Statistică
Probabilităţi
într-o şi Statistică
clasă recurentă, Probabilităţi
fărăşisă Statistică
o mai părăsim. Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Definition şi Statistică
6 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
O clasă şirecurentă
Probabilităţi Statistică se Probabilităţi
numeşteşi Statistică
periodică dacă stările
Probabilităţi care o
şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi >
compun pot fi partiţionate în k 2 submulţimi S1 ; S2 ; : :Statistică
şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi : ; Sk ,
Probabilităţi şi Statistică
astfel încât tranziţiile
Probabilităţi şi Statistică nu pot avea loc
Probabilităţi şi Statistică decât de la o sub-
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
mulţime la alta, în ordinea dată şi circular: şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi( şi Statistică Probabilităţi şi Statistică
8 2
Probabilităţi şi Statistică
si Sh ; pij > 0 ) 2 sj
S1 ;
Probabilităţi şi Statistică =
Probabilităţi
dacă h şikStatistică
:
Sh +1 ; altfel
Tipuri de stări
Probabilităţi şi Statistică
Se observă
Probabilităţi şi Statistică
Probabilităţi şi Statistică
că dacă si Probabilităţi
face parte
Probabilităţi şi Statistică
dintr-o clasăProbabilităţi
şi Statistică periodică, pen-
şi Statistică
Probabilităţi
tru şiorice n >
Statistică
Probabilităţi şi Statistică
Probabilităţi
1 trebuie săşiexiste
Statisticăcel puţin
Probabilităţi şi Statistică
Probabilităţi
o stare şi Statistică
sj , astfel
Probabilităţi şi Statistică
Probabilităţi rij
(n )
încâtşi Statistică= 0. ÎnProbabilităţi
felul acesta şi Statistică Probabilităţidupă
avem un criteriu şi Statistică
care o
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
clasă recurentă
Probabilităţi şi Statistică este neperiodică:
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
R este şineperiodică
Statistică Probabilităţi
dacă >
existăşi Statistică 2
un n 1 şi Probabilităţi
si R, astfel şi Statistică
ca
Probabilităţi
r
(n )şi Statistică
>
Probabilităţi
ij 0, pentru
şi Statistică orice s 2
Probabilităţi şi Statistică
R.
Probabilităţi
j şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi
Pentru şi Statistică
modelele bazate
Probabilităţi şi Statistică
Probabilităţi
peşilanţuri
Statistică Markov
Probabilităţi şi Statistică
Probabilităţi şi Statistică cel
ne interesează
Probabilităţi şi Statistică
mai şiadesea
Probabilităţi Statistică comportamentul pe termen lung,
Probabilităţi şi Statistică adică
Probabilităţi probabil-
şi Statistică
(n )
Probabilităţi
ităţile de şi Statistică
tranziţie rijProbabilităţi
, pentru şi Statistică
n foarte mare. Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Vom defini şi Statistică
Probabilităţi şi Statistică
în aceastăProbabilităţi
secţiuneşi condiţii
Statistică în care
Probabilităţi şi Statistică
(n )
Probabilităţi şi Statistică
rij converge
Probabilităţi şi Statistică
independent
Probabilităţi de stareaProbabilităţi
şi Statistică iniţialăşisStatistică
i. Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
Dacă există două clase recurente, atunci
Probabilităţi şi Statistică
şi Statistică
Probabilităţi şi Statistică
Probabilităţi
limiteleşi Statistică
acestor
Probabilităţi şi Statistică
probabilităţi,
Probabilităţi şi Statistică dacă există, pot depinde
Probabilităţi şi Statistică de
Probabilităţi şi Statistică (o
starea iniţială
Probabilităţi şi Statistică nu poate
clasă recurentă Probabilităţi şi Statistică VomProbabilităţi
fi părăsită). presupunem şi Statistică
că
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
lanţul are o singură clasă recurentă plus, eventual, alte câteva
stări tranzitorii.
Timpul de întoarcere într-o stare
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şitStatistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Notăm cu
Probabilităţi qij probabilitatea
şi Statistică Probabilităţica, plecând din
şi Statistică stareaşi sStatistică
Probabilităţi i , prima
Probabilităţi
tranziţie în şistarea
Statisticăsj să apară
Probabilităţi
după şi Statistică
t paşi: Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
t
= ( şi Statistică
qij şi Statistică
Probabilităţi =
P Xt sj and,
Probabilităţi şi Statistică
= 6= j = )
Probabilităţi şi Statistică
1; t 1; Xt Probabilităţi
for sşi Statistică
Probabilităţi si :
sj X0şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Definition 7 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
FieProbabilităţi
Zij timpul de întoarcere
şi Statistică în starea
Probabilităţi şi Statisticăsi dacăProbabilităţi
starea şiiniţială
Statistică
Probabilităţi
a fost s şi
X Probabilităţi
j ;Statistică
media Probabilităţi
acestei şi
variabile Statistică
aleatoare,Probabilităţi
h ij = E[ ] =
şi Statistică
Z ij
t şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
tq ,
Probabilităţi este
ij şi Statisticănumită timpul mediu
Probabilităţi şi Statisticăde întoarcere în s i dacă
Probabilităţi şi Statistică
>
t 1 Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statisticăa fost Probabilităţi
starea iniţială sj . şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Se poate
Probabilităţi şi Statistică
Probabilităţi şi Statistică
observa că Probabilităţi
pentru un
Probabilităţi şi Statistică
lanţ Markov
şi Statistică cu unşi număr
Probabilităţi Statistică
Probabilităţi şi Statistică Probabilităţi şi
finit de stări mediile de mai sus sunt finite. Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Proprietăţi
Probabilităţi şi Statistică privind aceste noţiuni
Probabilităţi şi Statistică apar in exerciţiile
Probabilităţi 9 şi 10.
şi Statistică
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Exemplu. şi Statistică
Considerăm
Probabilităţi şi Statistică
Probabilităţi
un lanţ şi Statistică
Markov cu Probabilităţi
Probabilităţi şi Statistică
două stări f
şi Statistică g
s1 ; s2 ,
Probabilităţi şi Statistică
astfel că şidin
Probabilităţi s1 trecemProbabilităţi
Statistică =
în s2 (pşi12Statistică1) şi dinProbabilităţi
s2 în s1şi(p =
Statistică
21 1).
Probabilităţi
Deci, după şiunStatistică
număr par Probabilităţi
de paşi şirevenim
Statistică în starea
Probabilităţi
din careşi Statistică
am
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
plecat:
Probabilităţi şi Statistică (
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 1; n par
Probabilităţi şi Statistică Probabilităţi şi Statistică
(n )
Probabilităţi şi Statistică rii = Probabilităţi şi Statistică
0;şi Statistică
n impar
| Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Acesta şieste Statistică
un exemplu Probabilităţi
în care şi Statistică
(n )
şirul rii nu Probabilităţi
converge şi Statistică
(os-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
cilează) şi sigura
Probabilităţi şi Statistică clasă a lanţului este
Probabilităţi şi Statistică periodică. Pentru con-
Probabilităţi şi Statistică
Probabilităţi
vergenţăşi Statistică
ar trebuiProbabilităţi
ca lanţul şi Statistică
să nu conţină Probabilităţi şi Statistică
clase periodice.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Următorul
Probabilităţi şi Statisticărezultat (centralşi Statistică
Probabilităţi al cursului) precizează condiţiile
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
în care convergenţa
Probabilităţi şi Statistică
are loc şi limita nuProbabilităţi
Probabilităţi şi Statistică
depindeşi Statistică
de starea
iniţială.şi Statistică
Probabilităţi Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Theorem
Probabilităţi şi4.1
Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Considerăm un lanţ Markov
Probabilităţi şi Statistică
omogen, discret şi
Probabilităţi şi Statistică
cu o mulţime
Probabilităţi şi Statistică
Probabilităţi
finită deşistări.Statistică Dacă Probabilităţi
lanţul conţineşi Statisticăo singură
Probabilităţi
clasăşirecurentă
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
care esteşi Statistică
Probabilităţi neperiodică Probabilităţi
(şi, eventual,
şi Statisticăstări tranzitorii), atunci
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
fiecărei stări sj îi putem asocia o probabilitate de echilibru Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(staţionară) j cu următoarele
Probabilităţi şi Statistică Probabilităţiproprietăţi:
şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
! 1 = (n )
lim rşiijStatisticăj , pentru
(i)Probabilităţi
n +şi Statistică
oriceşi Statistică
Probabilităţi i şi j . Probabilităţi şi Statistică
Probabilităţi Probabilităţi şi Statistică Probabilităţi şi Statistică
( )66
j 1 j şi m
(ii)Probabilităţi Statistică
sunt soluţiileProbabilităţi
8 Probabilităţi
şi Statistică
sistemului Probabilităţi şi Statistică
Probabilităţi şi Statistică şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică >> Xm
Probabilităţi şi Statistică
>
>
< Probabilităţi =
k pkjşi Statistică =
Probabilităţi şi Statistică Probabilităţi şi Statistică
j ; j 1;Probabilităţi
m şi Statistică
Probabilităţi şi Statistică k =1Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică > Xm
> Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică >>
: =
k 1 şi Statistică
Probabilităţi Probabilităţi şi Statistică
Probabilităţi şi Statistică kProbabilităţi
=1 şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(iii) j =şi Statistică
Probabilităţi 0, dacă sj este Probabilităţi
tranzitorie = 1
hjj
> şi0,Statistică
şi Statistică şi j Probabilităţi dacă sj
este recurentă.
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică
Probabilităţi
Probabilităţi şi Statistică
şi Statistică j formează
Probabilităţile Probabilităţi o distribuţie de
şi Statistică
Probabilităţi şi Statistică
probabilitate
Probabilităţi şi Statistică
Probabilităţi şi Statisticăstărilor:
pe spaţiul Probabilităţi şi Statisticăstaţionară
distribuţia Probabilităţi şi Statisticăast-
- numită
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
fel deoarece,
Probabilităţi şi Statistică dacă Probabilităţi
X1 are această
şi StatisticădistribuţieProbabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
f = g=
P X1 Probabilităţi
Probabilităţi şi Statistică sj 8 6 6
şij ;Statistică
1 j mProbabilităţi; atuncişi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Xm
Probabilităţi şi Statistică X Probabilităţi şi Statistică
m
f = g=
Probabilităţi şi Statistică
P X2 şi Statistică
Probabilităţi sj f = g
P Probabilităţi
X1 k şipStatistică
kj = kj =
k pProbabilităţi 8 6 6m
j ; şi1Statistică
j
Probabilităţi şi Statistică k =1Probabilităţi şi Statistică k =1 Probabilităţi şi Statistică
Probabilităţi şi Statistică
şi, înşi Statistică
Probabilităţi mod similar,Probabilităţi
se aratăşi Statistică
că P Xn f
Probabilităţi şi Statistică
= g=sProbabilităţi
j 8 6 6
Probabilităţi şi Statistică
j ,şi Statistică
1 j
Probabilităţi
m. şi Statistică Xm Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
k p kj = j ;
Probabilităţi şi Statistică
j =
Probabilităţi şi Statistică
1 ; mProbabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică k =1
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
se numesc şi Statistică
ecuaţiileProbabilităţi
de echilibruşi Statistică (consecinţă
Probabilităţi
a şiecuaţiei
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Chapman-Kolmogorov
Probabilităţi şi Statistică şi a existenţei
Probabilităţi şi Statistică limitelor din teorema
Probabilităţi şi Statistică
Probabilităţi şi Statistică
de mai sus). Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Xm Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
k = Probabilităţi
1 este ecuaţiaşi Statisticăde normalizare :
Probabilităţi şi Statistică
k =1
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Exemplu
ProbabilităţiConsiderăm
şi Statistică un Probabilităţi
lanţ Markov finit şi omogen,
şi Statistică Probabilităţi cu două
şi Statistică
Probabilităţi şi Statistică
stări şi probabilităţile Probabilităţi
de tranziţie şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică "
Probabilităţi #
şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi0şi:8Statistică
0:2 Probabilităţi şi Statistică
Probabilităţi şi Statistică =
P Probabilităţi şi Statistică: Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi0şi:6Statistică
0:4 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Soluţie: şiEcuaţiile
Statistică Probabilităţi şisunt
de echilibru Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
=
Probabilităţi şi Statistică
Probabilităţi şi1Statistică
+
1 p11 Probabilităţi =
2 p21 şi şi2Statistică
Probabilităţi şi Statistică
+
1 p12 Probabilităţi
2 p22 ;
Probabilităţi şi Statistică
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
adică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
=
Probabilităţi şi Statistică
1
Probabilităţi şi Statistică
+
0:81 Probabilităţi =
0:62 şişiStatistică
2 +
0:21 Probabilităţi
Probabilităţi şi Statistică
0:42 : şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
Aceste două ecuaţii sunt echivalente amândouă cu ecuaţia Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică =
Probabilităţi şi Statistică
1 3şi 2Statistică
Probabilităţi :
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Folosind şi Statistică de normalizare
şi ecuaţia 1+
Probabilităţi şiStatistică =
2 1, obţinem
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
1 = 0:75; 2 = 0:25 |
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Exemplu.
Probabilităţi Un profesor
şi Statistică "absent"
Probabilităţi are două Probabilităţi
şi Statistică umbrele şipe care le
Statistică
foloseşte atunci când merge de acasă la birou sau invers. Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Dacă
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
plouă şi dacă o umbrelă
Probabilităţi şi Statistică este la dispoziţie,
Probabilităţi şi Statistică atunci profesorul o ia şi
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
o foloseşte; dacă nu plouă, atunci profesorul uită întotdeauna să Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
ia umbrela.
Probabilităţi Să presupunem
şi Statistică că de
Probabilităţi fiecare dată Probabilităţi
şi Statistică când profesorul
şi Statisticătre-
Probabilităţi şi Statistică Probabilităţi şi Statistică
buie să se deplaseze între cele două locaţii plouă cu probabilitate Probabilităţi şi Statistică
2( )
Probabilităţi şi Statistică
0; 1 , independent
p Probabilităţi şi Statistică
Probabilităţi şi Statistică
deProbabilităţi
fiecare dată.
Probabilităţi şi Statistică
Care sunt
şi Statistică probabilităţile
Probabilităţi şi Statistică
Probabilităţi
de echilibru? şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Soluţie: şiStarea
Probabilităţi Statistică si : în Probabilităţi
locaţia unde se află profesorul
şi Statistică Probabilităţi şiseStatistică
găsesc i
umbrele, i = 0 ;
Probabilităţi şi Statistică
Probabilităţi şi Statistică
2. MatriceaProbabilităţi şi Statistică
probabilităţilor
Probabilităţi şi Statistică
de Probabilităţi şi Statistică
tranziţie este:
Probabilităţi şi Statistică
Probabilităţi şi Statistică 2 Probabilităţi şi Statistică 3 Probabilităţi şi Statistică
Probabilităţi şi Statistică 0 şi Statistică
Probabilităţi 0 1 Probabilităţi şi Statistică
Probabilităţi şi Statistică
= 6 Probabilităţi şi Statistică 7 Probabilităţi şi Statistică
Probabilităţi şi Statistică 4 0 şi Statistică
P Probabilităţi 1 p p 5Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
1 p şi Statistică p 0 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Comportamentul pe termen lung a lanţurilor Markov
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Se observă
Probabilităţică lanţul are o Probabilităţi
şi Statistică singură clasă recurentăProbabilităţi
şi Statistică care este nepe-
şi Statistică
Probabilităţi
riodică, şideci Statistică
se poate Probabilităţi
aplica teoremaşi Statistică de maiProbabilităţi şi Statistică de
sus şi ecuaţiile
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
echilibruşisunt
Probabilităţi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
0 =(
Probabilităţi 1 p)
şi Statistică
Probabilităţi şi Statistică
;
2 1 =(
Probabilităţi
1 ) +
şi Statistică
p 1 p 2
Probabilităţi şi Statistică
şi =
Probabilităţi
2 +
0 şi Statistică
p 1 :
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
rezolvând şi Statistică(împreună
sistemul Probabilităţi şi Statistică
cu ecuaţia Probabilităţiobţinem
de normalizare) şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică1 p Probabilităţi1şi Statistică 1 Probabilităţi şi Statistică
0 =
Probabilităţi şi Statistică
Probabilităţi şi Statistică3
=
; 1 şi Statistică
Probabilităţi
p Probabilităţi
; 2 = |
Probabilităţi şi Statistică
3 şipStatistică 3 pProbabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Random walks în grafuri neorientate
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Un drum
Probabilităţi aleator sauProbabilităţi
şi Statistică random walk într-unProbabilităţi
şi Statistică graf neorientatşi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
este un tip special deProbabilităţi
Probabilităţi şi Statistică
lanţ Markov folosit laProbabilităţi
şi Statistică
analiza şialgorit-Statistică
Probabilităţi
milor. şi Statistică
Fie G =( )
; E unşigraf
VProbabilităţi Statistică Probabilităţi şişiStatistică
(finit) neorientat conex.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Definition 8
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Un random
Probabilităţi G este un
walk în Probabilităţi
şi Statistică lanţ Markov
şi Statistică definit
Probabilităţi printr-o
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
secvenţă de mic
Probabilităţi şi Statistică
scări ale unei particule
Probabilităţi şi Statistică
între nodurile unui
Probabilităţi şi Statistică
grafProbabilităţi
(acestea sunt stărileProbabilităţi
şi Statistică lanţului). Dacă particula
şi Statistică Probabilităţiseşiaflă în
Statistică
Probabilităţi şi Statistică
nodul si care
Probabilităţi
are d
şi Statistică i
= dG ( )
Probabilităţi şi Statistică
si vecini,
Probabilităţi
Probabilităţi şi Statistică
atunci probabilitatea
şi Statistică Probabilităţi şi Statistică
ca
Probabilităţi
particulaşi Statistică
sa meargă pe Probabilităţi
muchia şi Statistică
si sj şi să seProbabilităţi
mute în şi Statistică
nodul sj
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
este 1=dşii .Statistică
Probabilităţi Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
G fiind
Probabilităţi conex drumul
şi Statistică
Probabilităţi şi Statistică
aleator
Probabilităţi
Probabilităţi şi Statistică
(random Probabilităţi
şi Statistică walk)corespunzător
şi Statistică
Probabilităţi
are o singură şi Statisticăclasă recurentă
Probabilităţi (de
şi Statistică
ce?). Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Digrafulşi Statistică
Probabilităţi tranziţiilor probabiliste se obţine orientând
Probabilităţi şi Statistică Probabilităţi şi fiecare
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
muchie a lui G în ambele sensuri. Fie G digraful corespun- ~Probabilităţi şi Statistică
zător drumului aleator în G.
Random walks în grafuri neorientate
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Lemma
Probabilităţi1.1şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
UnProbabilităţi
randomşiwalk într-unProbabilităţi
Statistică
graf conex neorientat,
şi Statistică
G, este nepe-
Probabilităţi şi Statistică
Probabilităţi
riodic dacă şi Statistică
şi numai Probabilităţi
dacă G şinu Statistică Probabilităţi şi Statistică
este bipartit.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
proof: Un
Probabilităţi graf este bipartit
şi Statistică dacă
Probabilităţi şi numai dacă
şi Statistică nu conţine
Probabilităţi şi Statistică cir-
Probabilităţi
cuite impare. şi Statistică în G ~ există
Evident căProbabilităţi şi Statistică
un drumProbabilităţi
de la orice şi Statistică
nod
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
la elProbabilităţi
însuşi şideStatistică
lungime 2. Probabilităţi
Dacă Gşi este bipartit Probabilităţi
Statistică atunci avem un
şi Statistică
Probabilităţi
random şiwalk Statistică
periodic Probabilităţi
cu perioada şi Statistică
2. Dacă Probabilităţi
G nu este şi Statistică
bipartit
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
atunci conţine
Probabilităţi şi Statisticăun circuit imparşi şi
Probabilităţi există noduri
Statistică care au
Probabilităţi drumuri
şi Statistică
Probabilităţi şi Statistică
impare până la ele însele.
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi
şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Un random walk într-un
Probabilităţi şi Statistică
Probabilităţi şi Statistică
graf conex neorientat
Probabilităţi şi Statistică
Probabilităţi şi Statistică
care nu este
Probabilităţi şi Statistică
Probabilităţi
bipartitşi satisface
Statistică Probabilităţi
condiţiile şi Statistică
din Teorema 4.1.Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi1.1
Theorem Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
FieProbabilităţi
G un graf neorientat,
şi Statistică conexşicare
Probabilităţi nu este Probabilităţi
Statistică bipartit.şi Statistică
Prob-
abilităţile de echilibru are drumului aleator în G sunt: i
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică =
hii = di
8 2
; si V .
Random walks în grafuri neorientate
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
proof: Fie
Probabilităţi P =( )
Probabilităţi şi Statistică
şi Statistică
Probabilităţi şi Statistică
pij Probabilităţi
matriceaşi Statistică
probabilităţilor
Probabilităţi şi Statistică
de tranziţie
Probabilităţi şi Statistică ale
Probabilităţi
lanţului MArkovşi Statistică Probabilităţi
corespunzător. şi Statistică
Distribuţia Probabilităţi
staţionară şi Statistică
există da-
Probabilităţi şi Statistică
torită Teoremei
Probabilităţi
Probabilităţi şi Statistică
4.1 şi nuProbabilităţi
şi Statistică există stări tranzitorii.
şi Statistică Probabilităţi ( ) 2
Probabilităţi şi Statistică
Fie şiStatistică
i si V
Probabilităţi şi Statistică
această distribuţie. Probabilităţide
Ecuaţiile şi Statistică =
echilibru, Probabilităţi
P , suntşi Statistică
echiva-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
lente cu şi Statistică
Probabilităţi X
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
j = Probabilităţi
j j = j j
dişi Statistică
1
Probabilităţi şi2Statistică
E di
dj
: Probabilităţi şi Statistică
2 EProbabilităţi şi Statistică
Probabilităţi şi Statistică 2
si N G (sj )
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
DinProbabilităţi
teoremaşi citată Statistică rezultăProbabilităţi
Probabilităţi şi Statistică
=
că şi Statistică
1
Probabilităţi jşi Statistică
h
, pentru orice Probabilităţi şi Statistică
j . (Deoarece
Probabilităţi şi Statistică
XProbabilităţi şi Statistică X şi Statistică jj
= j j
di şi Statistică
Probabilităţi 2 E urmează
Probabilităţi
că
Probabilităţi şi =
Statistică
i 1 care este
Probabilităţi şi Statistică
ecuaţia
Probabilităţi de nor-
şi Statistică
2
si VProbabilităţi şi Statistică 2
Probabilităţi
si V şi Statistică Probabilităţi şi Statistică
Probabilităţi
malizare.) şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Lemma
Probabilităţi1.2şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi 2
Dacă si sj E , atunciProbabilităţi
şi Statistică j j
hij < 2şiEStatistică
. Probabilităţi şi Statistică
Random walks în grafuri neorientate
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
proof: Calculăm
Probabilităţi şi Statisticăhii într-un mod şidiferit:
Probabilităţi Statistică Probabilităţi şi Statistică
ProbabilităţiXşi Statistică X Probabilităţi
X şi Statistică X X şi Statistică
Probabilităţi
= =
hiiProbabilităţitqşiiitStatistică t
Probabilităţi şi Statistică
Probabilităţi =
pij qjişit Statistică
1 1
=
tqşijit Statistică
Probabilităţi
Probabilităţi şi Statistică di Probabilităţi şi Statistică
1
t 1>
Probabilităţi >
şi Statistică 2
t 1 sj NG (si ) > 2 NG (si ) şi Statistică
Probabilităţi şi Statistică t 1 sj Probabilităţi
2
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi 3Statistică
Probabilităţi şi X StatisticăX X
Probabilităţi X
şi Statistică Probabilităţi şi Statistică
= 1 4
Probabilităţi şi Statistică +
qjit 1 şi Statistică
Probabilităţi ( ) =
1 qjit şi1 5Statistică
tProbabilităţi
Probabilităţi > 2
di şi tStatistică
Probabilităţi şi Statistică
1 sj NG (si ) Probabilităţi > 2
şi Statistică
t 1 sj NG (si )
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
0
Probabilităţi şi Statistică
1
X Probabilităţi
1 @X Probabilităţi
şi Statistică
X X Probabilităţi Probabilităţi şi Statistică
=
Probabilităţi şi Statistică
Probabilităţi şidStatistică Probabilităţi +
t şi1Statistică
qji şi Statistică tq =
t A şi Statistică
Probabilităţi
ji şi Statistică
i > 2
Probabilităţi şi Statistică t 1 sj Probabilităţi
NG (si ) > 2
şi Statistică
t 1 sj NG (Probabilităţi
si ) şi Statistică
Probabilităţi şi Statistică 0 1şi Statistică
Probabilităţi Probabilităţi şi Statistică
Probabilităţi şi1StatisticăX X şit Statistică1 XProbabilităţi şi Statistică
Probabilităţi
=
Probabilităţi şi Statistică @1 + =
tqji Aşi Statistică
Probabilităţi ( + )
1 hji şi:Statistică
Probabilităţi
Probabilităţi şidStatistică
2
i s N (s )
Probabilităţi şij Statistică
G i t >
Probabilităţi
1 şi Statisticădi
s
Probabilităţi şi Statisticăj
2N
Probabilităţi şi Statistică
(
G i s )
Probabilităţi şi Statistică
= j j
Probabilităţi şi Statistică 1 Probabilităţi şi Statistică X şi Statistică
Probabilităţi
Probabilităţi
Deoarece =
hiişi Statistică j j=
2E
Probabilităţi
, avem şi Statistică
2E ( +
Probabilităţi )
1 şi Statistică
hji şi
Probabilităţi şi Statistică i di 2
Probabilităţi şi Statistică Probabilităţi
sj NG (si )
şi Statistică
Probabilităţi şi Statistică
Algoritmul
Probabilităţi şi Statistică
Probabilităţi şi Statistică
prezentat Probabilităţi
va parcurge
Probabilităţi şi Statistică
un randomProbabilităţi
şi Statistică walk înşiGStatisticăpen-
Probabilităţi şi Statistică Probabilităţi şi Statistică
tru suficient de mulţi paşi astfel încât un drum de la s la t Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
să aibă
Probabilităţi şanse mariProbabilităţi
şi Statistică de a fi găsit.
şi Statistică Probabilităţi şi Statistică
Un algoritm pentru detectarea s-t conexiunii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
start a şirandom
Probabilităţi Statistică walk Probabilităţi
from s; şi Statistică Probabilităţi şi Statistică
Probabilităţiatinge
if(drumul şi Statisticăt în 4nProbabilităţi
3 paşi) şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi"există
return şi Statisticăun drum";
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
return "nu există unProbabilităţi
şi Statistică drum" şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
Algoritmul reţine poziţia
Probabilităţi şi Statistică
Probabilităţi şi Statistică
O(
curentă folosind Probabilităţi
Probabilităţi şi Statistică
)
Probabilităţi şi Statistică
log n şi Statistică
biţi şi
numărul
Probabilităţi de paşi făcuţi
şi Statistică (cel şimult
Probabilităţi 4n 3 ) careProbabilităţi
Statistică de asemenea nece-
şi Statistică
sităs O( )
Probabilităţi şi Statistică Probabilităţi şi Statistică
log n biţi.Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi
Vom presupune şi Statistică că graful
Probabilităţi şi Statistică
Probabilităţi şi Statisticăcomponente
nu conţine
Probabilităţi şi Statistică
Probabilităţi şi Statistică
conexe
Probabilităţi şi Statistică
bi-
partite şipentru
Probabilităţi Statistică a putea aplica şirezultatele
Probabilităţi Statistică anterioare.
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Theorem
Probabilităţi 2.1
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şide
Algoritmul Statistică
mai sus oferă Probabilităţi
unşi răspuns
Statistică Probabilităţi
corect şi Statistică
cu probabil-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
itate cel puţin
Probabilităţi 1=2 şi greşeşte
şi Statistică Probabilităţidoar când returnează
şi Statistică Probabilităţi mesajul
şi Statistică
Probabilităţi
"nu există şi Statistică
un drum" Probabilităţi
când deşifapt Statistică
un asemeneaProbabilităţi
drum şi Statistică
există.
Un algoritm pentru detectarea s-t conexiunii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
proof: Dacă şi Statistică
nu există drum Probabilităţi
de laşi sStatistică Probabilităţi
la t , algoritmul şi Statistică
returnează
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
un Probabilităţi
răspuns şicorect. Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
Să presupunem şi Statisticăcă există
Probabilităţi
un s-t şidrum Statistică
în G. FieProbabilităţi
X timpul şi Statistică
necesar
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
ajungeriişi de
Probabilităţi la s la t ; Probabilităţi
Statistică timpul mediu necesar Probabilităţi
şi Statistică ajungeriişi de la s la
Statistică
[ ]
Probabilităţi şi Statistică Probabilităţi şi Statistică
t , M X , este mărginit de timpul de acoperire al componentei Probabilităţi şi Statistică
Probabilităţi şi Statistică
conexe careşiconţine 0
Probabilităţi şi Statistică Probabilităţi şi Statistică 3
4mn şi<Statistică
Probabilităţi Statistică s şi tProbabilităţi
, G , care este cel mult
şi Statistică Probabilităţi 2n .
Probabilităţi şi Statistică Probabilităţi şi Statistică
Din inegalitatea lui Markov probabilitatea ca drumul aleator să Probabilităţi şi Statistică
Probabilităţi şi Statistică 3 Probabilităţi şi Statistică Probabilităţi şi Statistică
aibă maişimult
Probabilităţi de 4n Probabilităţi
Statistică paşi esteşi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
( )
Probabilităţi şi Statistică
1 p ) şiuşa
Probabilităţi Statistică
Probabilităţi şi Statistică
alăturată Probabilităţi
în sens şiorar
Probabilităţi şi Statistică
(respectivProbabilităţi
Statistică antiorar) uşii uti-
şi Statistică
lizate ultima oară. Care este probabilitatea ca o anumităşi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi uşă să
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
fie utilizată într-un
Probabilităţi şi Statistică viitor foarte îndepărtat?
Probabilităţi şi Statistică (Indicaţie: starea
Probabilităţi şi Statistică
Probabilităţi
si : ultima şi Statistică
uşă utilizată Probabilităţi
a fostşi Statistică
uşa i ; trebuie Probabilităţi
găsiteşi Statistică
probabil-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi echilibru i .)
ităţile deşi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
19*. Considerăm
Probabilităţi şi Statistică un lanţ Markov
Probabilităţi cu două stări
şi Statistică s1 şişi Statistică
Probabilităţi s2 , cu
Probabilităţi şi Statistică
probabilităţile Probabilităţi
de tranziţie
Probabilităţi şi Statistică
2( )
(p ; qşi Statistică
0; 1 ):
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţip11 =
Probabilităţi şi Statistică
=
1 p ; p12Probabilităţi
şi Statistică =
Probabilităţi şi Statistică
p ; p21şi Statistică = Probabilităţi şi Statistică
1 q : şi Statistică
q şi p22 Probabilităţi
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
(a) Arătaţi şi Statistică
că cele două Probabilităţi
stări şiformează
Statistică Probabilităţi
o clasă recurentăşi Statistică
nepe-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
riodică.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b) Utilizând ecuaţia lui
Probabilităţi şi Statistică
Chapman-Kolmogorov,
Probabilităţi şi Statistică
demonstraţi prin
Probabilităţi şi Statistică
inducţieşi Statistică
Probabilităţi că Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
( )= + + ( ) ( )
Probabilităţi şi Statistică p 1 Probabilităţi
p q şinStatistică Probabilităţip şi1Statistică
p q n
Probabilităţi
r11 n şi Statistică
p q
q
+
p q şi Statistică
( )= +
Probabilităţi şi Statistică
p
; r12 n Probabilităţi şi Statistică
pProbabilităţi
q + p q
;
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
r21 n( )= + (
Probabilităţi şi Statistică
q ) ( )= + + ( + )
p q şinStatistică
q 1 Probabilităţi Probabilităţi
p p q n
q şi1Statistică
; r22 n Probabilităţi şi Statistică :
Probabilităţi şi Statistică
p q
Probabilităţi şi Statistică +
Probabilităţi şi Statistică
p q şi Statistică
Probabilităţi pProbabilităţi
q p q
şi Statistică
20. Arătaţi că adunând primele (m 1) ecuaţii de echilibru o
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
obţinem pe a m-a.
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
21.Probabilităţi
Un controler şi Statistică
tratează Probabilităţi
cererile de şi Statistică
citire scriereProbabilităţi
(read-write) şi Statistică
pe
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
un Probabilităţi
suport de memorie
şi Statistică de la trei procese
Probabilităţi şi Statisticădiferite. Condiţiile sunt
Probabilităţi şi Statistică
Probabilităţi
de aşa natură şi Statistică
că fiecareProbabilităţi
procesşiare Statistică
un numărProbabilităţi
nelimitat şi Statistică
de astfel
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
de cereri. După
Probabilităţi şi Statistică satisfacerea unei cereri
Probabilităţi şi Statistică a procesului j controlerul
Probabilităţi şi Statistică
Probabilităţi
tratează şi Statistică
o cerere Probabilităţi
a procesului j cuşi Statistică
probabilitateProbabilităţi
pij , unde =
şi Statistică
P
( )
Probabilităţi şi Statistică
pijProbabilităţi
este următoarea
şi Statistică
Probabilităţi şi Statistică
matrice
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
2 Probabilităţi şi Statistică
3
Probabilităţi şi Statistică
0:1 0şi:Statistică
4 0:5 Probabilităţi şi Statistică
Probabilităţi şi Statistică 6
Probabilităţi 7 Probabilităţi şi Statistică
Probabilităţi şi Statistică 0:3 0:2 şi Statistică
4 Probabilităţi 0:5 5 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
0 :7 0 :2 0 :1
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi că
Presupunem Statistică Probabilităţi
o scriere/citire şi Statistică
durează un acelaşiProbabilităţi şi Statistică
timp constant.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a)Probabilităţi
Modelaţi şi Statistică Probabilităţi
această situaţie ca unşi Statistică
lanţ Markov Probabilităţi
cu treişistări Statistică
şi
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
desenaţişi Statistică
Probabilităţi digraful corespunzător.
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b) Determinaţi probabilităţile de echilibru, dacă acestea există.
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
22. În desenul
Probabilităţi şi Statisticăde maiProbabilităţi
jos este şitrasat
Statisticădigraful unui lanţ
Probabilităţi Markov
şi Statistică
Probabilităţi
discret şi Statistică
şi omogen. Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
0.7 0.2
Probabilităţi şi Statistică 0.3 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.5şi Statistică Probabilităţi şi Statistică
s1 s2 s3 s4
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.6 şi Statistică 1 Probabilităţi şi Statistică
Probabilităţi şi Statistică0.4 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.3 şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a)Probabilităţi
Determinaţi şi Statistică
matriceaProbabilităţi
de tranziţie şi Statistică Probabilităţi şi clasele
corespunzătoare, Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
recurente
Probabilităţi şi stările tranzitorii.
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b)Probabilităţi
Dacă există o
şi Statistică
singură clasă recurentă
Probabilităţi şi Statistică
neperiodică, determi-
Probabilităţi şi Statistică
naţişiprobabilităţile
Probabilităţi Statistică de echilibru
Probabilităţi ale stărilor.
şi Statistică Probabilităţi şi Statistică
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
În desenul
23.Probabilităţi de mai josProbabilităţi
şi Statistică este trasat digraful unui
şi Statistică lanţ şiMarkov
Probabilităţi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
discret şi omogen.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică s5
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
1 0.2
Probabilităţi şi Statistică Probabilităţi şi Statistică
1 1 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
s1 s2 0.5şi Statistică
Probabilităţi Probabilităţi
s4 şi Statistică
s3
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.3 Probabilităţi şi Statistică 0.7Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.3şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică matricea
(a) Determinaţi Probabilităţi şi Statistică corespunzătoare,
de tranziţie Probabilităţi şi Statistică
clasele
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
recurente şi
Probabilităţi şi Statistică stările tranzitorii.
Probabilităţi şi Statistică Probabilităţi şi Statistică
(b)Probabilităţi
Dacă există şi Statistică
o singurăProbabilităţi şi Statistică neperiodică,
clasă recurentă Probabilităţidetermi-
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
naţi probabilităţile de echilibru ale stărilor.
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
24. În desenul
Probabilităţi şi Statisticăde maiProbabilităţi
jos este şitrasat
Statisticădigraful unui lanţ
Probabilităţi Markov
şi Statistică
Probabilităţi
discret şi Statistică
şi omogen. Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică
0.4 Probabilităţi şi Statistică
0.1
0.2 0.4Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi0.5
Statistică Probabilităţi şi Statistică
s4 s2 s2 s1
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi
0.5Statistică 1 Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.5 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi0.4şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a)Probabilităţi
Determinaţi şi Statistică
matriceaProbabilităţi
de tranziţie şi Statistică Probabilităţi şi clasele
corespunzătoare, Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
recurente
Probabilităţi şi stările tranzitorii.
şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b)Probabilităţi
Dacă există o
şi Statistică
singură clasă recurentă
Probabilităţi şi Statistică
neperiodică, determi-
Probabilităţi şi Statistică
naţişiprobabilităţile
Probabilităţi Statistică de echilibru
Probabilităţi ale stărilor.
şi Statistică Probabilităţi şi Statistică
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
25.Probabilităţi
Matricea şi Statistică
de tranziţieProbabilităţi
a unui lanţ şi Statistică Probabilităţi
Markov discret şi şiomogen
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
esteProbabilităţi
următoarea: şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 2 Probabilităţi şi Statistică 3 Probabilităţi şi Statistică
Probabilităţi şi Statistică 0:2 0şi:6Statistică
0 Probabilităţi 0 :2 Probabilităţi şi Statistică
Probabilităţi şi Statistică 6 Probabilităţi şi Statistică
0:2 0:6 0 0:2 7 7 Probabilităţi şi Statistică
Probabilităţi şi Statistică 6 6 Probabilităţi şi Statistică 7 Probabilităţi şi Statistică
Probabilităţi şi Statistică 0 0:4şi Statistică
4 Probabilităţi 0:6 0 5 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0 0:3şi Statistică
Probabilităţi 0 :7 0 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a)Probabilităţi
Determinaţi şi Statistică Probabilităţi şi Statistică
digraful crespunzător Probabilităţi
lanţului, clasele şi Statistică
recurente
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
şi stările
Probabilităţi tranzitorii. Probabilităţi şi Statistică
şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b)Probabilităţi
Dacă există o singurăProbabilităţi
şi Statistică
clasă recurentă
şi Statistică
neperiodică, determi-
Probabilităţi şi Statistică
Probabilităţi
naţişiprobabilităţile
Statistică Probabilităţi
de echilibruşi Statistică Probabilităţi şi Statistică
ale stărilor.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
26.Probabilităţi
În desenul şi Statistică
de mai josProbabilităţi
este trasat şi Statistică
digraful unui Probabilităţi
lanţ şiMarkov
Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
discret şi omogen.
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.5 Probabilităţi şi Statistică
0.2 Probabilităţi şi Statistică
Probabilităţi şi Statistică
0.5 Probabilităţi şi Statistică 0.4Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
0.4
Probabilităţi şi Statisticăs1 Probabilităţi
s2 şi Statistică s3 Probabilităţi
s4 şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.2Statistică
0.8 Probabilităţi şi 0.6
Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.4 şi Statistică
Probabilităţi Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a)Probabilităţi
Determinaţi matriceaProbabilităţi
şi Statistică de tranziţie corespunzătoare,
şi Statistică Probabilităţi şi clasele
Statistică
Probabilităţi şi Statistică Probabilităţi
recurente şi stările tranzitorii. şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi
(b) Dacă şi Statistică
există o singură Probabilităţi
clasăşirecurentă
Statistică Probabilităţi şiscrieţi
neperiodică, Statistică sis-
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
temul
Probabilităţi de ecuaţii care
şi Statistică conduc
Probabilităţi la determinarea
şi Statistică probabilităţilor
Probabilităţi şi Statistică
de echilibru ale stărilor.
Lanţuri Markov - exerciţii
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
În desenul
27.Probabilităţi de mai josProbabilităţi
şi Statistică este trasat digraful unui
şi Statistică lanţ şiMarkov
Probabilităţi Statistică
Probabilităţi
discret şişi omogen.
Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică 0.2 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică 0.7 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
s1 şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică 0.5 Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.3 şi Statistică
0.6 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statisticăs 0.5Probabilităţi şi Statistică s Probabilităţi şi Statistică
Probabilităţi şis3Statistică
2 4
Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
0.8 Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi
0.4 şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(a) Determinaţi
Probabilităţi şi Statistică matricea de tranziţie
Probabilităţi şi Statistică corespunzătoare, clasele
Probabilităţi şi Statistică
Probabilităţi
recurente şi Statistică Probabilităţi şi Statistică
şi stările tranzitorii. Probabilităţi şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică Probabilităţi şi Statistică
(b)Probabilităţi
Dacă există o singurăProbabilităţi
şi Statistică clasă recurentăşi Statistică neperiodică,
Probabilităţiscrieţi sis-
şi Statistică
Probabilităţi şi Statistică Probabilităţi şi Statistică
temul de ecuaţii care conduc la determinarea probabilităţilor Probabilităţi şi Statistică