Об одном алгоритме динамического программирования в стохастических системах

Рассматривается задача численного синтеза оптимальной стратегии в стохастических системах, эволюция которых описывается управляемыми марковскими процессами с дискретным временем. Построен алгоритм динамического программирования, выгодно отличающийся от алгоритма Ховарда отсутствием необходимости решения систем уравнений на итерации.