Детерминированная или стохастическая

Если следующее состояние среды полностью определяется текущим состоя­нием и действием, выполненным агентом, то такая среда называется детер­минированной; в противном случае она является стохастической. В принципе в полностью наблюдаемой детерминированной среде агенту не приходится действовать в условиях неопределенности. Но если среда - частично наблю­даемая, то может создаться впечатление, что она является стохастической. Это отчасти справедливо, если среда - сложная и агенту нелегко следить за всеми ее ненаблюдаемыми аспектами. В связи с этим часто бывает более удобно классифицировать среду как детерминированную или стохастическую с точки зрения агента. Очевидно, что при такой трактовке среда вождения такси явля­ется стохастической, поскольку никто не может точно предсказать поведение всех других транспортных средств; более того, в любом автомобиле совершен­но неожиданно может произойти прокол шины или остановка двигателя.

Описанный здесь мир отстающего студента является детерминированным, но другие

варианты этой среды могут включать стохастические элементы, такие как случайная болезнь преподавателя. Если среда является детерминированной во всех отношениях, кроме действий других агентов, то эта среда называются - стратегической.