Марковский; а состояние равновесия иногда называют

впитывающее состояние. В примере S.9 / 4 не было состояния равновесия.

Риум. Он бы приобрел один, если бы мы добавили четвертую позицию

«На бумажке», откуда и произошло название.

Вокруг состояния равновесия поведение марковского

Машина явно отличается от детерминантной. Если система

Имеет конечное число состояний, то, если он находится на траектории, ведущей к

Состояние равновесия, любая отдельная детерминированная система должна

Приходят в состояние равновесия после прохождения определенной траектории.

И, следовательно, после точного количества шагов. Таким образом, в

229

ANINTROD UC TIONTOCYBER NE TICS

TH E ERR O R- CO N TR O LLED REG U LA TO R

Первый график S.2 / 17, система в C придет в D ровно за два

Шаги. Однако если система марковская, она не требует

Уникальное количество ступеней; а продолжительность траектории может быть

Прогнозируется только в среднем. Итак, предположим, что марковский

Машина

↓ ab

a1 1/2

b0 1/2

С состоянием равновесия. Запустите множество таких систем

Все в б. После первого шага половина из них уйдет на полтора.

Будет по-прежнему в б. На втором этапе половина из тех, кто еще находится на b, будут

Перейти на половину (т.е. четверть целого) останется на

Б. Продолжая таким образом, мы обнаруживаем, что из тех, что были начаты

В б,

1/2 досягаемости a после 1 шага

1/4,,,,,, 2,,

1/8,,,,,, 3,,

И так далее. Таким образом, среднее время, необходимое для перехода от b к a, равно

1⁄2 × 1 + 1⁄4 × 2 + 1⁄8 × 3 +…

-------------------------------------------------- -------------------------------- = 2 шага.-

1⁄2 + 1⁄4 + 1⁄8 +…

Некоторые из траекторий будут намного длиннее двух шагов.

Как теперь хорошо известно, система, находящаяся в состоянии равновесия

Ведет себя как «целеустремленный», при этом государство является целью. Корректно

В марковском случае возникает явление спондирования. Здесь,

Вместо того, чтобы система решительно двигалась к цели, кажется,

Блуждать неопределенно среди государств, последовательно перемещаясь в

Другой, когда не в состоянии равновесия и в равной степени состоят

И не останавливаясь там, когда он случайно попадает в это состояние. Государство все еще

Похоже, имеет отношение «цель» к системе, но система

Кажется, попадает туда, пробуя случайную последовательность состояний, а затем

Движется или застревает в зависимости от того, в каком состоянии он находится. Таким образом

Показаны объективные свойства достижения успеха методом проб и ошибок

Когда марковская машина переходит в состояние равновесия.

Здесь, возможно, стоит сказать, что общее название

«Метод проб и ошибок» вводит в заблуждение настолько, насколько это возможно. «Судебный процесс» находится в

Единственное, а суть метода в том, что

Попытки продолжаются и продолжаются. «Ошибка» тоже выбрана неудачно, поскольку

Элемент - это успех в конце. «Охота и палка», кажется,

Описать процесс как ярче, так и точнее. я

Должен использовать его вместо другого.

230

Таким образом, движение к цели в процессе охоты и кнута.

Гомологичен, согласно S.12 / 8, движению по определенной траектории

Ибо оба являются движением машины к состоянию равновесия.

С осторожностью мы можем применять тот же набор принципов и аргументировать

Замечания к обоим.

Бывший. 1: Какие состояния равновесия имеет система Исх. 12/10 / л?

Бывший. 2: Марковская машина имеет матрицу

↓

а

б

c

d

е

ж

а

б

c

.

.

.

1

.

.

d

.

.

.

.

1

.

е

.

.

.

.

.

1

ж

.

.

.

.

.

1

1/3 1/3

1/3 1/3

1/3 1/3

..

..

..

Он запускается во многих случаях; как бы его поведение было описано

На языке психологии крысиного лабиринта?

M AR KOVI AN RE GULAT ION

Развитие отдельной марковской машины к состоянию

Равновесие гораздо менее упорядочено, чем у детерминированной машины,

Поэтому марковский тип мало используется в регуляторах промышленности. В

Сравнение с плавным и прямым регулированием обычного

Сервомеханизм действительно должен показаться неуклюжим. Тем не менее, жив-

Организмы свободно используют этот более общий метод, так как машина

Который его использует, в целом гораздо легче сконструировать и