Цепь Маркова

Материал из Википедии — свободной энциклопедии

Перейти к: навигация, поиск

Пример цепи с двумя состояниями

Це́пь Ма́ркова — последовательность случайных событий с конечным или счётным числом исходов, характеризующаяся тем свойством, что, говоря нестрого, при фиксированном настоящем будущее независимо от прошлого. Названа в честь А. А. Маркова (старшего).

Содержание
  • 1 Цепь Маркова с дискретным временем
    • 1.1 Определение
    • 1.2 Переходная матрица и однородные цепи
    • 1.3 Конечномерные распределения и матрица перехода за n шагов
    • 1.4 Классификация состояний цепи Маркова
    • 1.5 Примеры
  • 2 Цепь Маркова с непрерывным временем
    • 2.1 Определение
    • 2.2 Матрица переходных функций и уравнение Колмогорова — Чепмена
    • 2.3 Матрица интенсивностей и дифференциальные уравнения Колмогорова
    • 2.4 Свойства матриц P и Q
    • 2.5 Граф переходов, связность и эргодические цепи Маркова
    • 2.6 Примеры
  • 3 Основное кинетическое уравнение
    • 3.1 Функции Ляпунова для основного кинетического уравнения
      • 3.1.1 Примеры функций Моримото
  • 4 Литература

Понравилась статья? Добавь ее в закладку (CTRL+D) и не забудь поделиться с друзьями:  



double arrow
Сейчас читают про: