Реальные процессы часто обладают последствием и поэтому не являются марковскими. Иногда при исследовании таких процессов удается воспользоваться методами, разработанными для марковских процессов. Наиболее распространены два способа:
1. Метод разложения случайного процесса на фазы (метод псевдосостояний)
2. Метод вложенных цепей Маркова