Оглавление:
- Определение - что означает Марковский процесс принятия решений (MDP)?
- Techopedia объясняет Марковский процесс принятия решений (MDP)
Определение - что означает Марковский процесс принятия решений (MDP)?
Марковский процесс принятия решений (MDP) - это то, что профессионалы называют «стохастическим процессом управления в дискретном времени». Он основан на математике, впервые разработанной русским академиком Андреем Марковым в конце 19 и начале 20 веков.
Techopedia объясняет Марковский процесс принятия решений (MDP)
Один из способов объяснить марковский процесс принятия решений и связанные с ним марковские цепочки состоит в том, что это элементы современной теории игр, основанные на более простом математическом исследовании российского ученого несколько сотен лет назад. Описание процесса принятия решений по Маркову состоит в том, что он изучает сценарий, в котором система находится в некотором заданном наборе состояний, и движется вперед в другое состояние на основе решений лица, принимающего решения.
Цепочка Маркова как модель показывает последовательность событий, где вероятность данного события зависит от ранее достигнутого состояния. Профессионалы могут говорить о «исчисляемом пространстве состояний» при описании процесса принятия решений Маркова - некоторые связывают идею модели решений Маркова с моделью «случайного блуждания» или другой стохастической моделью, основанной на вероятностях (модель случайного блуждания, часто цитируемая на Wall Улица, моделирует движение капитала вверх или вниз в контексте рыночной вероятности).
В общем, процессы принятия решений Маркова часто применяются к некоторым из самых сложных технологий, над которыми сегодня работают профессионалы, например, в робототехнике, автоматизации и моделях исследований.
