Марковские цепи и процессы: стационарные вероятности и анализ переходных состояний
При моделировании систем, которые изменяют свое состояние случайным образом с течением времени (от колебаний фондовых индексов до маршрутизации пользователей на веб-сайтах), исследование операций обращается к мощнейшему аппарату теории стохастических процессов. Среди них абсолютной жемчужиной являются марковские цепи, названные в честь выдающегося русского математика Андрея Андреевича Маркова. Гениальность марковских процессов заключается в радикальном упрощении моделирования сложной реальности: они опираются на свойство отсутствия математической памяти, что позволяет сжимать историю системы в одну переходную матрицу и прогнозировать ее поведение на бесконечность шагов вперед методами элементарной линейной алгебры.