Глава 8. НЕКОТОРЫЕ ЭКСПЕРИМЕНТЫ
8.2. СХЕМА БАЗОВОЙ ЗАДАЧИ
Задача автомата в первых двух рассматриваемых экспериментах
состоит только в том, чтобы адаптироваться к конкретной внешней среде,
конкретной ситуации в зрительном поле. Для этого у автомата должны
скорректироваться отношения в памяти. Задача названа базовой, поскольку
она и ее отдельные фрагменты являются базой для решения многих других
задач. Задача автомата — организовать рациональное считывание внешней
ситуации, использовать ситуацию для создания и поддержания хорошего
внутреннего состояния. Эта простейшая задача поведения, где вместо
того, чтобы пойти туда-то и сделать то-то, а затем туда-то и т.д.,
требуется посмотреть туда-то, чтобы увидеть то-то, и т.д.
Настройка на ситуацию, или процесс зрительного восприятия,
проходит несколько фаз: сначала ситуация для автомата безразлична,
затем он "заинтересовывается" и начинает ей подчиняться, затем она ему
"приятна", а потом "надоедает". Схему работы автомата во всех этих
фазах мы сейчас рассмотрим. Важным моментом в базовой задаче будет
включение действия в ответ на искажение ситуации, когда автомат на нее
уже настроился. Автомат "захочет" исправить ситуацию и по собственному
желанию совершит действие в среде.
8.2.1. Первая фаза задачи —
автомат заинтересовывается.
Ситуация в зрительном поле показана на рис.8.1 и
представляет собой десять случайно расположенных объектов: кружки 1C,
треугольники 2С и квадраты 3С.
В исходном состоянии у автомата нейтральное эмоциональное
состояние: в ЭЦ нет дефицита питания и нейроны равномерно распределены
по возрастам — нет пакетов. В памяти автомата нет ни активных, ни
потенциальных очагов возбуждения, т.е. доминант.
Рис. 8.1. Объекты в зрительном поле
Работа автомата в самом ее начале определяется только
свойствами глаза фокусироваться, расфокусироваться и изменять
направление взгляда. Результатом переключений глаза будет накопление
возбуждения на элементах памяти 1Сф, 2Сф,
3Сф. Возбуждение на jСф
увеличивается, когда глаз направлен на jС, и
уменьшается, когда глаз направлен на другие объекты, или расфокусирован.
Интересным событием с последствиями будет срабатывание
одного из элементов памяти — пусть это будет 1Сф,
что соответствует кружкам на зрительном поле. Вероятность такого
события при малых внешних возбуждениях на jСф,
без помощи составляющих возбуждения от своего слова jСc
и от эмоционального центра, весьма мала, но не равна нулю. Предположим,
что в какой-то момент это событие все-таки произошло. Его первыми
следствиями будут:
1) срабатывание слова 1Сc;
2) срабатывание элемента пространственной памяти; пусть это
будет 25Cп, что соответствует кружку в клетке 25
(элементы 31Сп и 35Сп,
соответствующие положениям двух других кружков, находятся в неактивном
состоянии);
3) образование пакета в ЭЦ. Элемент 25Cп
сработает в силу того, что после срабатывания 1Сф
глаз останется сфокусированным в положении (2,5) до тех пор, пока 1С1
не кончит генерировать. Этого времени должно быть достаточно для
накопления на 25Cп возбуждения, превышающего
порог срабатывания 25Cп.
Последующее развитие событий определяется повторными
спонтанными срабатываниями 1Сc и 25Cп,
возможными в силу свойства постанодальной экзальтации.
Пусть элемент памяти 1Сc сработал
повторно. Из этого следует, что элемент 1Сc стал
очагом возбуждения (1Сcп) и, значит, в
эмоциональном центре граница критической зоны высоких потреблений
двигается влево, питание, требуемое нейронами ЭЦ, превышает
поступающее, растет дефицит питания, состояние ЭЦ ухудшается.
С ухудшением состояния ЭЦ увеличивается поисковая активность
автомата. Глаз автомата останавливается на объектах 1C, 2C,
3C чаще, чем в исходном индифферентном состоянии, но
задерживается на них меньшее время, если он не оказывается случайно на
объекте 1C, которому соответствует уже работающий очаг
возбуждения 1Сcп. Только в этом
случае элемент памяти 1Сф успеет сработать, так
как только в этом случае он получает дополнительное возбуждение от
своего слова 1Сc.
Если 1Сc срабатывает при новом
положении объекта 1С, то срабатывает и новый,
соответствующий этому положению элемент 31Cп или
35Cп.
Результатом будет то, что автомат быстро найдет все
местоположения некоторого, случайно первым заинтересовавшего его,
объекта 1С. Память о местоположениях объекта механизменно
выражена пока только в спонтанных срабатываниях 25Cп,
31Cп, 35Cп
благодаря свойству постанодальной экзальтации. На этом первая фаза
восприятия, или первая фаза базовой задачи, завершается. Состояние, в
котором оказывается автомат, определено тем, что в ЭЦ автомата
образовались пакеты и они требуют срабатывания элемента памяти 1Сф.
Автомат попал в зависимость от внешней ситуации: ему необходимо в
определенные моменты времени видеть определенный предмет, автомат
оказался "заинтересован" в этом, и его самочувствие оперативно зависит
от временных сдвигов между моментами времени "надо" и "нашел". Глаз по
завершении первой фазы приходит в нужные клетки (х,у) зрительного поля
главным образом благодаря спонтанным срабатываниям xyСп.
Элемент 1Сф работает в подчинении у xyСп, которые работают
разрозненно, редко, в "случайные" моменты времени, мало коррелировано с
распределением пакетов ЭЦ. Состояние автомата по завершении первой фазы
восприятия определяется тем. что необходимость получать определенные
воздействия от внешней среды есть, а возможности управлять этими
воздействиями еще нет.
8.2.2. Вторая фаза задачи —
автомат запоминает.
Дальнейшее развитие процесса восприятия определится
организацией комплекса элементов памяти из 1Cc и { xyСп}
путем образования синаптических связей от 1Cc на 25Cп, 31Cп,
35Cп (рис. 8.2). Когда 1Cc работает в высокочастотном режиме (n » n opt),
работает также один из xyСп.
Это условие усиления связи от 1Cc на xyСп(xy1r +)
и, как следствие этого, ослабления собственной связи у xyСп(xy1r +).
Связи изменяются: для xyir + от 0 до (xyir +)max,
для xyxyr
+ от (xyxyr +)N
до (xyxyr +)min. Изменения связей временные. После того
как ситуация в зрительном поле изменилась, связи постепенно, но
относительно быстро возвращаются к исходным значениям. В рабочих
алгоритмах модели синаптические связи представляются как
двухкомпонентные, состоящие из статической и динамической компонент:
изменения, о которых мы говорим сейчас, касаются только динамических
компонент.
Восприятие ситуации, процесс ее считывания, который мы
интерпретируем как развитие интереса автомата к внешней среде, зависит
от величин связей xyir + и xyxyr + в образующемся комплексе.
По мере уменьшения значений xyxyr + уменьшаются вероятности
повторных спонтанных срабатываний для 25Cп, 31Cп,
35Cп. Но зато с появлением и усилением
связей xy1r +
появляются условия для принудительных запусков 25Cп,
31Cп, 35Cп при
генерации 1Cc.
При некоторых значениях xyxyr + и xy1r +, таких, что еще возможны
спонтанные срабатывания Сп и уже
возможны их принудительные запуски от Сс,
становится возможной работа "сериями". Первое срабатывание в серии
определяется спонтанным срабатыванием одного из xyСп.
Глаз приходит в точку (х,у), работают 1Сф и 1Сс.
От 1Сс принудительно запускаются остальные точки
(х,у). Глаз, закончив считывание на первой точке, сразу переходит на
другие и считывает их. Сигнал для эмоционального центра оказывается
наложением трех сигналов. Он оказывается продолжительным и сильным и
создает в эмоциональном центре значительный пакет, а это значит, что
будут и значительные перепады эмоционального состояния. Такая форма
работы подготавливает переход к "оптимальному считыванию" с управлением
от ЭЦ.
При оптимальном считывании запуск серии происходит от
спонтанного срабатывания группы 1Сс«
1Сф. В режиме очага возбуждения 1Сс
работает почти все время, но теперь благодаря появлению больших пакетов
он имеет возможность повысить свою интенсивность в момент
отрицательного перепада, когда пакет заходит в критическую область
высокого потребления, что вызывает снижение порога рефрактерности
нейронов. Этого повышения интенсивности у 1Сс
(при некоторой помощи от 1Сф) достаточно для
принудительного запуска xyСп
по связи xy1r
+ и, значит, для образования серии. Управление считыванием
ситуации переходит к эмоциональному центру и определяется режимом:
величинами пакетов и периодами циркуляции пакетов. При управлении от ЭЦ
1Сф и 1Сс
срабатывают и уже работают с достаточной интенсивностью, когда под
глазом еще нет объекта 1С. Автомат
уже видит "внутренним зрением" то, что ищет, но еще не нашел. При
оптимальном считывании пакеты раз от раза увеличиваются и увеличиваются
положительные перепады эмоционального состояния при их переброске с
помощью сигналов серии — это можно интерпретировать как нарастающее
удовольствие. При размерах пакета, больших некоторой величины, серия
уже не может весь его перебросить, остающаяся часть заходит в
критическую область и начинает ухудшать эмоциональное состояние.
Суммарный эмоциональный эффект остается еще положительным, но быстро
снижается — фрагмент внешней ситуации запомнен и "надоел".
Появление некоторого эмоционального минуса после серии
прерывает процесс считывания выделенной части ситуации — группы кружков
в нашем примере. Механизм прерывания процесса состоит в том, что
"минус" по времени оказывается тогда, когда должен спонтанно
запуститься и остаться в режиме очага возбуждения элемент 1Сс.
Прозевав этот благоприятный момент времени, 1Сс
далее сам уже запуститься не может. Это означает, что автомат решил
некоторую частную задачу "считывание подситуации из кружков". Следует
"награда". Так как очаг возбуждения снят, критическая зона высоких
потреблений в ЭЦ отодвигается, требования в питании резко снижаются и
начинается значительное пополнение резервов для нейронов эмоционального
центра. В результате этой награды автомат временно теряет интерес ко
всей ситуации: что-то уже понял и увидел, остальное пока не интересно.
Следом проделанной автоматом работы будет комплекс элементов памяти
(ЭП): 1Сс связан с 25Cп, 31Cп,
35Cп, уменьшены связи у 25Cп,
31Cп, 35Cп и
существенно (временно) повышен порог возбуждения у 1Сс
(этот ЭП "перекормлен" — у его нейронов имеются большие собственные
резервы). После того как автомат "успокоится", т.е. рассосутся пакеты и
израсходуются лишние питательные запасы, образовавшиеся в эмоциональном
центре при награждении, автомат опять может возвратиться к ситуациям в
зрительном поле. Однако теперь, так как порог у 1Сс
много выше, чем пороги у 2Сс и 3Сс,
автомат "заинтересуется" другими подситуациями, имеющимися в зрительном
поле.
Рис. 8.2. Память о подситуации "кружки"
8.2.3. "Механизм ловушки".
Остановимся теперь на важном моменте: что будет делать
автомат, когда мы испортим ему "радость познания" и исказим ситуацию,
на которую он уже успел настроиться и находится по отношению к ней в
состоянии оптимального считывания. Ситуацию испортим тем, что
переставим один из кружков с его старого места (3,5) на новое (4,6).
Произойдет следующее. Глаз, считывая знакомую подситуацию,
дойдет до клетки (3,5), с которой убрали объект. Эмоциональный центр
недополучит часть сигнала (некоторое недоумение), а 35Cп
останется очагом возбуждения, так как не сможет перейти на нормальный
режим работы и, значит, не погасится.
Пакет вернется в критическую зону; 1Сс
увеличит частоту генерации разрядов, пытаясь запустить 25Cп
и 31Cп, но не сможет этого сделать, так как
работающий 35Cп создает на них "альтернативные
пробки" и значительно повысит их пороги. Сигналов для переброски пакета
не образуется, и пакет глубоко зайдет в критическую зону, вызывая
нарастающее неудовольствие.
Неудовольствие стимулирует случайный поиск кружка (объекта 1С)
в зрительном поле, и автомат чере какое-то время находит новое
положение переставленного кружка — (4,6).
Образуется "ловушка" — устойчивый маятниковый режим, из
которого трудно выйти, причем у находящегося в этом режиме автомата не
формируются сигналы для переброски пакетов в эмоциональном центре.
Схема отношений между элементами памяти в режиме "ловушка" показана на
рис. 8.3.
Рис. 8.3. Иллюстрация к механизму "ловушка"
Ловушка определена тем, что в памяти автомата образовались
два устойчивых очага возбуждения: элементы памяти 35Cп
и 46Cп. Элемент 35Cп
становится постоянным очагом возбуждения, так как глаз, попадая в
клетку (3,5), теперь не находит здесь объекта, не фокусируется (или
расфокусируется) и, следовательно, элемент не получает внешнего
возбуждения, необходимого дня перехода в высокочастотный режим
генерации и гашения ЭП.
Элемент 46Cп будет потенциальным
очагом возбуждения в силу того, что он только что начал работать и у
него сильные возбуждающие связи (4646r +» (xyxyr +)N) и, значит, высокая вероятность повторных
срабатываний.
Пусть в какой-то момент времени глаз оказался в положении
(4,6). Так как в этой клетке зрительного поля нужный объект есть, то
интенсивность работы 1Сс начнет увеличиваться,
создавая возбуждения для 25Cп, 31Cп,
35Cп.
Возбуждение, необходимое элементу 35Cп
для того, чтобы перейти из режима ОВ в режим высокочастотной генерации,
меньше, чем необходимо элементам 25Cп и 31Cп,
чтобы перейти из состояния покоя в состояние очага возбуждения (ОВ) и
далее состояние высокочастотной генерации (ВГ). Тем более что у
элементов 25Cп и 31Cп уже
имеются пробки благодаря работе 35Cп в режиме ОВ.
Элемент 35Cп переходит в режим ВГ,
благодаря чему вероятность переключения глаза из положения (4,6) в
положение (3,5) делается очень высокой, несмотря на то что 46Cп
в это время также находится в режиме ВГ.
Глаз переходит в положение (3,5). И сразу же элемент 1Сс
возвращается в режим ОВ; возбуждение от 1Сс на 25Cп
и 31Cп быстро падает; элемент 35Cп
возвращается из режима ВГ в ОВ.
Элемент 35Cп, заработав в режиме ВГ,
"сорвал" глаз с объекта и перевел его на место, где объект был раньше,
но где его уже нет. При этом сигнал на эмоциональный центр, который
начинал образовываться в положении (4,6) прервался (не развился).
Другим следствием срыва будет увеличение синаптических
связей у 35Cп и 46Cп и
усиление этих ансамблей. Элементы 35Cп и 46Cп
работают теперь без посторонней помощи с интенсивностью, в среднем
меньшей, чем оптимальная (n <n opt), а это и
есть условие усиления связей. Раз от раза элементы памяти 35Cп
и 46Cп становятся "сильнее", а это значит, что
сильнее делается ловушка.
С появлением ловушки состояние эмоционального центра быстро
ухудшается. Ухудшение эмоционального состояния — "нарастающая волна
злости" — запускает моторный элемент памяти "поднять".
При сильноотрицательных эмоциональных состояниях автомата
возникает значительная вероятность спонтанного срабатывания моторных
элементов автомата. Механизм "глаз-рука" берет объект — кружок.
Состояние "взял и держит" неустойчиво и стимулирует действие
"положить". С очень высокой вероятностью, определяемой механикой
ловушки, автомат кладет объект туда, где он был раньше, — в клетку
(3,5), т.е. восстанавливает знакомую правильную ситуацию.
Действие провоцируется неприятностью, "злостью" и
оказывается удачным. Опять появляются сигналы для эмоционального
центра, и его состояние быстро улучшается. Большой положительный
эмоциональный перепад закрепляет опыт автомата в виде образующейся
связи от 1Сс на ЭП "взять". В следующий раз
автомат уже раньше возьмет объект-кружок, при меньшей неприятности,
тогда как для треугольника и квадрата порог "злости" останется еще
почти прежний. "Почти" означает, что если удачным оказалось действие
над кружком, то вероятность этого действия вообще над любым объектом
несколько увеличивается. Это происходит благодаря усилению внутренней
связанности у элемента "поднять". Если взятие объекта связано с
ухудшением состояния автомата — вес (тяжесть) объекта уменьшает приток
питания, как в случаях эмоционально отрицательных объектов, то автомат
свяжет в памяти объекты с их весами, и когда в задачах окажется выбор
между действиями над разными объектами, он будет выбирать лучшие, т.е.
брать легкие объекты. В экспериментальных задачах веса объектов пока не
вводились.