Марковские процессы. Часть 4 // Александр Буфетов / ЛШСМ

Лягушка сидит в вершине квадрата и раз в десять секунд принимает решение и совершает прыжок: с вероятностью p по часовой стрелке, с вероятностью q против часовой стрелки, с вероятностью 1−p−q на месте. Через десять секунд вновь решая куда прыгнуть, лягушка принимает во внимание лишь ту вершину, в которой она находится. Таким образом, положения лягушки в различные моменты времени не независимы, однако, при фиксированном настоящем, будущее лягушки независимо от её прошлого. В честь открывшего их нашего великого соотечественника Андрея Андреевича Маркова такие системы испытаний называют цепями Маркова. Цель нашего курса — дать элементарное введение в теорию марковских процессов со счётным числом состояний. Буфетов Александр Игоревич — доктор физико-математических наук. Летняя школа «Современная математика», г. Дубна 20-23 июля 2017 г.