Определение. Пример MDP с 3 состояниями и 2 действиями

Пример MDP с 3 состояниями и 2 действиями

Чтобы определить марковский процесс принятия решений нужно задать 4-кортеж , где

• конечное число состояний,
• конечное число действий (часто представляется в виде, конечное число действий доступных из состояния ),
• вероятность, что действие в состоянии во время перейдет в состояние ко времени ,
• вознаграждение получаемое после перехода в состояние из состония с вероятностью перехода .