آنالیزمارکوف - زنجیره مارکوف و احتمالات حدی در زنجیره مارکوف همراه با مثال - 25 صفحه فایل ورد و قابل ویرایش

                فرایند استوکتیک : یک مجموعه از متغیرهای تصادفی است  {x(t), teT}   که در آن ،  eT  متغیر تصادفی است  t را زمان یا پارامتر فرآیند و xt  را وضعیت آن گویند. اگر t که متغیر زمان است را به یک متغیر گسسته بنام n تبدیل نمائیم در این صورت  xt به xn  تبدیل خواهد گشت . که xn متغیر وضعیت در محله nام خواهد شد. مثال : فرض کنید سه نفر با یک توپ بازی می‌کنند که شخص A توپ را به شخص B و شخص B توپ را به شخص C ...