Материал из Википедии — свободной энциклопедии
Перейти к: навигация, поиск
Пример цепи с двумя состояниями
Це́пь Ма́ркова — последовательность случайных событий с конечным или счётным числом исходов, характеризующаяся тем свойством, что, говоря нестрого, при фиксированном настоящем будущее независимо от прошлого. Названа в честь А. А. Маркова (старшего).
Содержание
- 1 Цепь Маркова с дискретным временем
- 1.1 Определение
- 1.2 Переходная матрица и однородные цепи
- 1.3 Конечномерные распределения и матрица перехода за n шагов
- 1.4 Классификация состояний цепи Маркова
- 1.5 Примеры
- 2 Цепь Маркова с непрерывным временем
- 2.1 Определение
- 2.2 Матрица переходных функций и уравнение Колмогорова — Чепмена
- 2.3 Матрица интенсивностей и дифференциальные уравнения Колмогорова
- 2.4 Свойства матриц P и Q
- 2.5 Граф переходов, связность и эргодические цепи Маркова
- 2.6 Примеры
- 3 Основное кинетическое уравнение
- 3.1 Функции Ляпунова для основного кинетического уравнения
- 3.1.1 Примеры функций Моримото
- 4 Литература
|