Lanuri Morkov timp discret

Scopul lucrrii: Studierea metodelor de redare, descriere, analiza proprietilor de comparare ale lanurilor Morkov
timp discret i a caracteisticilor numerice de performan.

Consideraii teoretice:
Lanul aleator de timp Morkov este un ir de variabile aleatoare care satisface condiia lui Morkov i anume:
probabilitatea sistemului c sitemul discret la moment (k+1) (deseori numit i epoc sau perioad), s se gseasc n
starea discret (ik+1), condiia de faptul c sistem s-a gsit respectiv la momentele 1,2,...,k-1 n strile i1,i2,...,ik, nu
depind de ultima stare, adic

Pr( xk+1 = ik+1 /xk = ik , xk-1 = ik-1 ,...x1 =i1 ) = Pr( xk+1 = i1/xk = ik)
Probabilitatea ca sistemul s fie n starea i la momentul k, ovom nota:

i(k)= Pr( xk=i)

n

0 i(k) 1,

i ( k ) = 1
i =1

Probabilitaea c sistemul s treac n starea j la momentul (k+1), tiind c n momentul precedent k s-a aflat n starea i,
adic probabilitatea condiionat
n

i(k+1) =

i ( k ) p

i =1

, j=1,2,...,n ; k=0,1,2...

Un lan Morkov este complet determinat dac cunoatem: mulimea strilor discrete S={si, i=1,n}, vectorul-linie al
probabilitilor de stare iniial (0) i matricea stochastic a probabilitilor de trecere:
n

(P i,j)(i, j=1,...,n), 0 P i,j1,

p
i =1

i, j

=1

Relaia prin care determinm probabilitile de stare la momentul (k+1) cu ajutorul probabilitilor de trecere i
avectorului de stare corespunztor momentului k, este descris de ecuaia Kolmogorov[9]:
n

i(k+1) =

i ( k ) p
i =1

, j=1,2,...,n ; k=0,1,2...

Dac la fiecare stare j se va ataa o funcie cost cj(k) de aflare a lanului DLM n aceast stare, atunci scopul mediu
c(k) de funcionare a lanului este:
n

C(k) =

i =1

[ ci i(k)]

Pentru Lanul Morkov trebuie de calculat cu ajutorul pachetului de programare QM probabilitatea Sb(k) i costul
mediu CSb(k) de aflare a lanului DLM la momentul k ntr-o submulime de stri S b S , astfel nct S b S R ,

S R =.

Tabelele de probabiliti

graficele respective a dependenelor Psb, Psr si C,Csb,Csr:

Tabelul de probabiliti pentru lanul Morkovian ergotic:

Nr.
1
2
3
4
5
6
7
8
9
10
11
12
Psr
Psb
Csr
Csb
C

10

Ci

0,04

0,02

0,02

0,02

0,02

0,02

0,02

0,02

0,02

0,02

41

0,6

0,2

0,07

0,04

0,05

0,05

0,05

0,05

0,05

0,05

0,05

0,05

-42

0,5

0,2

0,10

0,12

0,11

0,12

0,12

0,12

0,12

0,12

0,12

43

0,4

0,2

0,6

0.12

0,10

0,10

0,10

0,10

0,10

0,10

0,10

0,10

-44

0,3

0,2

0,05

0,03

0,03

0,03

0,03

0,03

0,03

0,03

0,03

0,03

45

0,2

0,03

0,04

0,05

0,04

0,05

0,05

0,05

0,05

0,05

0,05

-46

0,09

0,09

0,09

0,09

0,09

0,09

0,09

0,09

0,09

0,09

47

0,13

0,10

0,10

0,10

0,10

0,10

0,10

0,10

0,10

0,10

-48

0,02

0,02

0,03

0,03

0,03

0,03

0,04

0,04

0,04

0,04

49

0,1

0,06

0,06

0,07

0,07

0,07

0,07

0,07

0,07

0,07

0,07

50

0,02

0,05

0,05

0,05

0,05

0,05

0,05

0,05

0,05

0,05

51

0,3

0,16

0,11

0,10

0,09

0,09

0,09

0,09

0,09

0,09

0,09

52

0.5

0.27

0.18

0.33

0.24

0.25

0.25

0.26

0.26

0.26

0.26

0.5

0.41

0.56

0.56

0.54

0.55

0.55

0.55

0.55

0.55

0.55

5,6

3.46

1.57

2.66

3.2

2.74

2.74

3.23

3.23

3.23

3.23

6.8

13.7

6.72

7.94

6.99

7.42

7.42

7.42

7.42

7.42

7.42

12.4

17.1
6

8.29

10.6

10.1
9

10.1
6

10.1
6

10.6
5

10.65

10.6
5

10.65

0,1
0
1

10

11

20
18
16
14
12
10
8
4
0
1

10 11 12

Tabelul de probabiliti pentru lanul Morkovian ergotic (cu intrrile interne deplasate cu 3
stari):
r.
1
2
3
4
5
6
7
8
9
10
11
12
Psr

10

Ci

0,1

0,06

0,05

0,04

0,04

0,04

0,04

0,04

0,04

0,04

0,04

41

0,11

0,11

0,10

0,10

0,09

0,09

0,09

0,09

0,09

0,09

-42

0,7

0,3

0,09

0,11

0,12

0,12

0,12

0,12

0,12

0,12

0,12

0,12

43

0,6

0,13

0,11

0,11

0,11

0,11

0,11

0,11

0,11

0,11

0,11

-44

0,2

0,01

0,04

0,04

0,04

0,04

0,04

0,04

0,04

0,04

0,04

45

0,10

0,06

0,06

0,06

0,06

0,06

0,06

0,06

0,06

0,06

-46

0,2

0,12

0,12

0,12

0,12

0,12

0,12

0,12

0,12

0,12

0,12

47

0,2

0,08

0,11

0,11

0,10

0,11

0,11

0,11

0,11

0,11

0,11

-48

0,04

0,05

0,04

0,05

0,05

0,05

0,05

0,05

0,05

0,05

49

0,10

0,10

0,09

0,09

0,09

0,09

0,09

0,09

0,09

0,09

50

16

0,10

0,05

0,07

0,06

0,06

0,07

0,06

0,06

0,07

0,07

51

14

0,06

0,08

0,10

0,10

0,10

0,10

0,10

0,10

0,10

0,10

52

10

0.3

0.41

0.37

0.38

0.37

0.37

0.37

0.37

0.37

0.37

Psb

0.7

0.58

0.63

0.61

0.60

0.61

0.60

0.60

0.61

0.61

Csr

13.1

3.32

2.94

3.23

3.85

4.81

4.81

4.81

4.81

4.81

Csb

12.7

8.96

9.45

9.42

9.16

9.45

8.94

8.94

9.45

9.45

25.8

0.4
2
0.5
8
0.6
5
8.7
1
9.3
6

12.2
8

13.3
9

12.6
5

13.0
1

14.2
6

13.7
5

13.7
5

14.2
6

14.26

0,8

0,5
0,4
0,3
0,2
0,1
0
1

12

2
0
1

10 11 12

10

Tabelul de probabiliti pentru lanul Morkovian neergotic(cu intrrile interne deplasate cu 3

stari):
Nr
1
2
3
4
5
6
7
8
9
10
11
12
Psr

10

Ci

0,1

0,1

0,08

0,09

0,09

0,09

0,10

0,11

0,11

0,12

0,12

41

0,2

0,2

0,13

0,07

0,11

0,10

0,11

0,11

0,11

0,12

0,12

-42

0,1

0,07

0,06

0,04

0,04

0,03

0,02

43

0,2

0,06

0,08

0,07

0,05

0,05

0,04

0,03

0,03

-44

0,2

0,11

0,10

0,14

0,12

0,15

0,14

0,16

0,16

0,17

0,17

45

0,17

0,06

0,15

0,12

0,15

0,15

0,15

0,16

0,16

0,16

-46

0,02

0,05

0,04

0,04

0,03

0,02

0,02

0,02

47

0,13

0,07

0,07

0,06

0,05

0,04

0,03

0,03

-48

0,09

0,11

0,11

0,15

0,14

0,16

0,16

0,17

0,17

0,18

49

0,1

0,04

0,13

0,11

0,14

0,14

0,15

0,15

0,16

0,16

0,16

50

0,06

0,03

0,02

0,02

0,02

0,01

0,01

51

0,3

0,16

0,10

0,08

0,06

0,05

0,04

0,03

0,03

52

0.5

0.61

0.56

0.71

0.77

0.8

0.84

0.87

0.9

0.9

Psb

0.5

0.4

0.32

0.27

0.24

0.18

0.14

0.14

0.1

0.09

Csr

5.6

11.0
4
3.2

14.2
2
1.14

15.5
3
1.11

16.0
6
1.11

16.99

2.66

13.6
9
2.15

16.5

Csb

11.4
5
5.21

13.3

6.8

1.04

1.04

12.4

0.7
1
0.4
7
3.1
1
4.6
8
7.7
9

16.6
6

14.2
4

15.9
6

15.8
4

15.3
6

16.6
4

17.1
7

15.5
4

18.03

1
0,9
0,8
0,7
0,6
0,5
0,4
0,3
0,2
0,1
0
1

10 11

12

20
18
16
14
12
10
8
6
4
2
0
1

10 11 12 13

Tabelul de probabiliti pentru lanul Morkovian neergotic.

Nr.
1
2
3
4
5
6
7
8
9
10
11
12
Psr

10

Ci

0,1

0.1

0.07

0.08

0.08

0.09

0.10

0.11

0.11

0.12

0.12

41

Psb

0,7

Csr

13,1

Csb

12,7

25,8

0.11

0.09

0.10

0.09

0.10

0.11

0.11

0.11

0.12

0.12

-42

0,8

0,3

0.08

0.06

0.05

0.04

0.04

0.03

0.02

0.02

43

0,6

0.12

0.09

0.07

0.06

0.05

0.04

0.03

-44

0,4

0,2

0.03

0.10

0.12

0.13

0.14

0.15

0.16

0.16

0.17

0.17

45

0,2

0.10

0.14

0.12

0.14

0.14

0.15

0.15

0.16

0.16

0.16

-46

0,2

0.12

0.06

0.05

0.04

0.03

0.02

0.02

0.02

47

0,2

0.08

0.10

0.07

0.06

0.05

0.04

0.03

0.03

-48

0.04

0.10

0.12

0.14

0.15

0.16

0.17

0.17

0.18

0.18

49

0.10

0.09

0.13

0.14

0.15

0.15

0.15

0.16

0.16

0.16

50

0.06

0.03

0.03

0.02

0.02

0.01

0.01

51

30

0.06

0.08

0.07

0.06

0.05

0.04

0.03

0.03

52

25

0,3

0,4
8
0,5
2
3,1
9
6,3
8
9,57

0,5
9
0,4
2
6,5
5
2,3
3
8,88

0,67

0,6

0,77

0,82

0,85

0,87

0,86

0,86

20

0,34

0,28

0,24

0,18

0,14

0,14

0,12

0,1

10

0
1

11

15

11,3
4
3,23

12,7
7
2,22

14,2

14,57

14,99

Condiiile iniiale:

16,0
2
1,11

16,0
6
0,07

16,9
9
1,04

16,99

2,15

14,1
2
1,14

16,35

15,26

17,13

16,13

18,03

17,6

0,61

0
1

10 11

Graful penru lanul Marcov timp ergotic:

1
1 0,4
2 0,2
3 0
4 0
5 0,1
6 0
7 0
8 0
9 0
10 0
11 0
12 0

2
0,3
0
0,2
0
0,1
0,4
0
0
0
0
0
0

3
0,1
0,3
0,2
0,2
0
0
0,1
0
0
0,4
0
0,2

4
0,1
0
0,2
0
0
0
0,1
0,2
0
0
0,5
0,2

5
0,1
0,1
0
0
0
0
0
0
0,4
0
0
0,1

6
0
0,1
0
0
0,2
0
0,3
0
0
0,1
0
0

7
0
0,3
0,2
0,1
0
0,2
0,1
0,2
0
0,1
0
0

8
0
0
0,2
0,5
0
0
0,1
0
0
0
0,1
0,1

9
0
0
0
0
0,2
0,2
0
0
0
0,2
0,1
0

10
0
0
0
0
0,2
0,2
0,1
0,2
0,4
0
0,3
0

11
0
0
0
0
0,2
0
0,1
0,2
0,1
0,2
0
0

12
0
0
0
0,2
0
0
0,1
0,2
0,1
0
0
0,4

0
0
0,2
0
0,2
0,2
0
0
0
0
0,1
0
0,3

Lanul neergotic l pirmim n aa fel nct n regiunea vrfurilor 3,4,7,8,11,12 s nu intre arce:
1
1 0,4
2 0,2
3 0
4 0
5 0,3
6 0
7 0
8 0
9 0
10 0
11 0
12 0

2
0,3
0
0,2
0
0,1
0,4
0
0
0
0
0
0

3
0
0
0,2
0,2
0
0
0,1
0
0
0
0
0,2

4
0
0
0,2
0
0
0
0,1
0,2
0
0
0,5
0,2

5
0,3
0,4
0
0
0
0
0
0
0,5
0
0
0,1

6
0
0,4
0
0
0,2
0
0,3
0
0
0,5
0
0

7
0
0
0,2
0,1
0
0
0,1
0,2
0
0
0
0

8
0
0
0,2
0,5
0
0
0,1
0
0
0
0,1
0,1

9
0
0
0
0
0,2
0,4
0
0
0
0,5
0,1
0

10
0
0
0
0
0,2
0,2
0,1
0,2
0,5
0
0,3
0

11
0
0
0
0
0
0
0,1
0,2
0
0
0
0

12
0
0
0
0,2
0
0
0,1
0,2
0
0
0
0,4

0
0
0,2
0
0,2
0,2
0
0
0
0
0,1
0
0,3

UNIVERSITATEA TEHNIC A MOLDOVEI

Facultatea de Calculatoare, Informatic i Microelectronic

Lucrare de laborator Nr 1

Lanul Markov timp discret

Efectuat de studentul grupei C-031

Vasilachi Andrei

Verificat de prof:

Odobescu Diana

Chiinu 2004