Основные понятия Марковских процессов

Функция X(t) называется случайной, если ее значение при любом аргументе t является случайной величиной.
Случайная функция X(t), аргументом которой является время, называется случайным процессом.
Марковские процессы являются частным видом случайных процессов.

1. Основные понятия Марковских процессов.
2. Классификация Марковских процессов.
3. Граф состояний.
4. Марковские цепи.
4.1 Примеры.
5. Непрерывные цепи Маркова.
6. Финальные вероятности состояний.
6.1 Примеры