زنجیر مارکوف

فرایندی تصادفی که با معلوم بودن حالت کنونی آن، آیندۀ آن از گذشته‌اش مستقل است