مکانیک کوانتومی، زنجیره مارکوف هستند. همچنین زنجیر مارکوف در شبیه‌سازی شبک‌های QCD استفاده می‌شود. در بهداشت عمومی از زنجیره مارکوف برای مدل‌سازی ریاضی...

از مراحل ممکن باشد. در یک زنجیره مارکوف جاذب، حالتی که جاذب نباشد گذرا (حالت گذرا) نامیده می‌شود. فرض کنید که یک زنجیره مارکوف جاذب با ماتریس انتقال P {\displaystyle...

صفحه شامل مثال‌هایی از زنجیره مارکوف است. بازی مار و پله یا هر بازی دیگری که حرکات بوسیلهٔ تاس تعیین می‌شود یک زنجیرهٔ مارکوف هستند. این نوع بازی‌ها در...

آمار، روش‌های زنجیره مارکف مونت کارلو (MCMC) یک کلاس از الگوریتم‌ها برای نمونه‌برداری از یک توزیع احتمالی را تشکیل می‌دهند. با ساخت یک زنجیره مارکف که توزیع...

کاربردهای زنجیره مارکوف هستند. وی به خاطر کارش در فرآیندهای تصادفی مشهور است. موضوع اصلی تحقیقات او بعدها به عنوان زنجیره مارکوف و فرایند مارکوف شناخته شد...

تأثیر زیادی در پیشرفت نظریه احتمال داشتند، چبیشف و شاگردانش، لیاپونوف و مارکوف یک رشته از مسئله‌های کلی نظریه احتمال را حل کردند و قضایای برنولی و لاپلاس...

می‌گیرد. در یادگیری ماشین، محیط به‌طور معمول به عنوان یک فرایند تصمیم‌گیری مارکوف (MDP) معرفی می‌شود. بسیاری از الگوریتم‌های یادگیری تقویتی از تکنیک‌های برنامه‌نویسی...

مدل پنهان مارکوف (به انگلیسی: Hidden Markov Model) یک مدل مارکوف آماری است که در آن سیستم مدل شده به صورت یک فرایند مارکوف با حالت‌های مشاهده نشده (پنهان)...

توزیع نرمال میل می‌کند. به مسئله ولگشت سادهٔ یک بعدی می‌توان به دیده زنجیره مارکوف نگریست که فضای حالات آن، اعداد صحیحِ i = 0 , ± 1 , ± 2 , . . . {\displaystyle...

انجام شده تنظیم می‌شود، چهار مدل رایج مارکوف در موقعیت‌های مختلف استفاده می‌شود: ساده‌ترین مدل مارکوف زنجیره مارکوف است. وضعیت یک سیستم را با یک متغیر تصادفی...

رستوران چینی فرایند گالتون-واتسون متغیرهای تصادفی مستقل با توزیع یکسان زنجیره مارکوف فرایند مورن ولگشت Loop-erased ولگشت خودپرهیز (قدم زدن بدون قطع کردن...