|
218 с некоторой вероятностью, и в результате детерминированный магазинный автомат сменится на вероятностный магазинный автомат. До сих пор считалось, что комбинационная схема в процессе работы остается неизменной, а число состояний в блоке состояний задано. Откажемся от этих предположений и допустим изменение структуры комбинационной схемы в процессе работы и добавление (или устранение) состояр ний. Это позволит моделировать такие феномены поведения, как адаптация или обучение. Для этого необходимо в схеме, показанной на рис.4.1, ввести обратные связи от среды, с помощью которых можно было бы оценивать отклики среды на те или иные действия. Моделирование адаптации и обучения возможно и для блока состояний, представляющего собой вероятностный автомат. Пусть i иj — номера двух состояний, имеющихся в этом блоке, qtj — вероятность перехода из состояния i в состояниеj, а 1— q(j — вероятность сохранения состояния i; тогда, если в состоянии / определенная совокупность сигналовXj вызывала набор действий, на которые среда дает положительный отклик, то можно произвести пересчет вероятностей. Например, 1—qfj можно увеличить на некоторую величину 8 , a qtj уменьшить на ту же величину. Тогда в следующий раз при поступлении на вход Xj организм, с большей вероятностью оставшийся в состоянии /, сможет опять сформировать хороший отклик. Пересчет вероятностей позволяет адаптировать поведение организма к той среде, в которой он функционирует. Можно моделировать и явление # импритинга, т.е. мгновенного установления безусловного рефлекса на некоторый стимул. Такое моделирование возможно, если в схеме, показанной на рис. 4.3, разрешить добавлять новые состояния (в блоке состояний), управляющие ключами. Новые состояния можно использовать для формирования новых комбинаций открытых и запертых ключей, т.е. для формирования новых стимулов, поступающих на вход комбинационной схемы. |
а считывание информации происходит в обратном порядке, начиная с последней записи, занесенной в память). Другое усложнение связано с введением блока случайного воздействия, действие которого может распространяться не только на сдвиговые регистры, как показано на рис. П.4, но, например, и на блок состояний. Это позволит осуществлять смену состояний с некоторой вероятностью и детерминированный магазинный автомат сменится на вероятностный магазинный автомат. До сих пор мы считали, что комбинационная схема в процессе работы остается неизменной, а число состояний в блоке состояний задано. Можно отказаться от этих предположений и допустить изменение структуры комбинационной схемы в процессе работы и добавление (или устранение) состояний. Это позволит моделировать такие феномены поведения, как адаптация или обучение. Правда, для того чтобы это стало возможным, необходимо в схеме, показанной на рис. П.1, ввести обратные связи от среды, с помощью которых можно было бы оценивать отклики среды на те или иные действия. Поясним, как можно осуществить моделирование адаптации и обучения для случая блока состояний, представляющего собой вероятностный автомат. Пусть in j — номера двух состояний, имеющихся в этом блоке, qu — вероятность перехода из состояния i в состояние /, а 1 — qn — вероятность сохранения состояния i; тогда, если в состоянии i определенная совокупность сигналов Х г вызывала набор действий, на которые среда дает положительный отклик, то можно произвести пересчет вероятностей. Например, 1—qu можно увеличить на некоторую величину б, a qlf уменьшить на ту же величину. Тогда в следующий раз при поступлении на вход Х± организм, с большей вероятностью оставшийся в состоянии I, сможет опять сформировать хороший отклик. Пересчет вероятностей позволяет адаптировать поведение организма к той среде, в которой он функционирует. Можно моделировать и явление импритинга, т. е. мгновенного установления безусловного рефлекса на некоторый стимул. Такое моделирование возможно, если в схеме, показанной на рис. П.З, разрешить добавлять новые состояния (в блоке состояний), управляющие ключами. Новые состояния можно использовать для формирования новых комбинаций открытых и запертых ключей, т. е. для формирования новых стимулов, поступающих на вход комбинационной схемы. Само явление импритинга будет соответствовать мо262 |