მარკოვის ერგოდული ჯაჭვების ძირითადი მახასიათებლები

ერგოდული ჯაჭვი ხასიათდება იმით, რომ იგი შედგება მხოლოდ ერთი

ერგოდული კლასისგან, ე.ი შესაძლებელია ყოველი მდგომარეობიდან ნებისმიერ
მდგომარეობაში გადასვლა.
ძირითადი აღნიშვნები:
- ვექტორ-სვეტი, რომლის ყველა ელემენტი 1-ის ტოლია.
= - თითოეულ მდგომარეობაში გატარებული დროის ზღვრული დისპერსიის
ვექტორი.
- მატრიცა რომლის ყველა ელემენტი 1-ის ტოლია.
– მატრიცა, რომლის თითოეული სტრიქონი -ს ტოლია.
- დიაგონალური მატრიცა, რომლის -ური დიაგონალური ელემენტია
მატრიცა, რომლის ელემენტი არის -ური მდგომარეობიდან ურ
მდგომარეობაში პირველად მიღწევის დროის მათემატიკური ლოდინი .
მატრიცა, რომლის ელემენტი არის -ური მდგომარეობიდან ურ
მდგომარეობაში პირველად მიღწევის დროის დისპერსია.
- ურ მდგომარეობაში პირველ ბიჯზე გატარებული დრო.
 ერგოდული ჯაჭვების ძირითადი მახასიათებლები

1. - ერგოდული ჯაჭვების ფუნდამენტალური მატრიცა.

3.
4.
5.
6.
=
8.
9.
10.
11. .
 მარკოვის მშთანთქავი ჯაჭვების თეორიის გამოყენება
ერგოდული ჯაჭვებისათვის

მაგალითი. მოცემულია მარკოვის ერგოდული ჯაჭვის მდგომარეობებს შორის

გადასვლის მატრიცა

ვიპოვოთ მდგომარეობიდან მდგომარეობაში პირველად მიღწევის დროის

მათემატიკური ლოდინი და დისპერსია. ამისათვის ჩვენი პროცესის მდგომარეობა გავხადოთ
მშთანთქავი. მიღებული ჯაჭვი იქნება მშთანთქავი ერთადერთი მშთანთქავი მდგომარეობით.
ამ პროცესის ქცევა ზუსტად ემთხვევა საწყისი პროცესის ქცევას მდგომარეობაში პირველად
მოხვედრამდე.
 .

ამ მატრიცის კანონიკური სახეა

ვიპოვოთ - ფუნდამენტალური მატრიცა, სადაც

.
.
 .

ვიპოვოთ .

.
 მარკოვის ჯაჭვების შებრუნებადობა

მარკოვის ერგოდული ჯაჭვის შებრუნებული მარკოვის ჯაჭვის გადასვლის მატრიცაა

მარკოვის ერგოდული ჯაჭვი შებრუნებადია, თუ მატრიცა სიმეტრიულია, ხოლო

და მატრიცებისათვის უძრავი ალბათური ვექტორები (სტაციონარული განაწილებები )
ერთნაირია.

მაგალითი. შებრუნებადია თუ არა მარკოვის ჯაჭვი, რომლის მდგომარეობებს შორის

გადასვლის მატრიცაა
.
თუ შებრუნებადია იპოვე
 ამოხსნა. მოცემული ჯაჭვის უძრავი ალბათური ვექტორი (სტაციონარული განაწილება )

.
.
მაშასადამე, სიმეტრიულია და ჯაჭვი შებრუნებადია. ე.ი.

  შენიშვნა: -ისათვის იგივე შედეგს მივიღებთ, თუ მას გამოვითვლით

ფორმულით.