12/13. До сих пор мы рассматривали только путь, по которому марковская машина достигает своей цели. В принципе единственным отличием ее от детерминированной машины является то, что ее траектория не единственна. С учетом этого различия мы можем применять к регулированию, осуществляемому посредством марковской машины, все те понятия, которые мы ввели в предшествующих главах этой части.

[Следует учитывать предостережение, сделанное в 11/11 (абз. 5). Шаги, которыми марковская машина движется по своей траектории, имеют величину меньшего порядка, чем шаги, отделяющие один акт регулирования (один <ход> в смысле 11/3) от другого. По-следние соответствуют изменению одной траектории в другую, что в корне отлично от перехода по траектории от одной точки к другой.]

Таким образом, основная формулировка 11/4 совместима с использованием как детерминированных, так и марковских машин в качестве систем Т и R, определяющих фактический исход. Никакой принципиальной разницы нет, хотя если мы опишем их поведение в психологических или антропоморфических терминах, то могут получиться весьма различные описания. Так, если требуется, чтобы (для данного внешнего воздействия) проявляло свою регулирующую силу переходом в некоторое состояние, то детерминированное прямо перейдет в это состояние, тогда как марковское R будет как бы искать его.

Марковская машина, как и детерминированная, может использоваться в качестве средства управления,ибо доказательства 11/14 относятся к обоим типам (в этих доказательствах рассматривалось только, какие исходы были получены, а не как они были получены). При этом она имеет тот недостаток, что ее траектория неопределенна, но зато имеет то преимущество, что ее легко проектировать.