Рис. 12. Вероятностное прогнозирование событий D и Е хорошо осуществляется с помощью ящиков 11 порядка и плохо — с помощью ящика 1 порядка

Наличие ящиков высоких (второго и выше) порядков позволяет моделировать не только классические условные рефлексы, описанные И. П. Павловым, но и условные рефлексы, названные учеником Павлова Ю. Конорским условными рефлексами второго типа (в отличие от классических — условных рефлексов первого типа). Условные рефлексы второго типа известны в литературе и под другими названиями — инструментальных условных реакций (Хильгард, Маркие), оперантного поведения (Скиннер).

В чем же различие между условными рефлексами первого и второго типов?

Общая схема условного рефлекса первого типа приведена в очерке «Способность заглядывать в будущее». Для характеристики же условного рефлекса второго типа опишем один из экспериментов Конорского. Собаку оставляли в пустом помещении, где она время от времени лаяла. Каждые несколько минут раздавался стук метронома, и если собака в этот момент лаяла, то из пищевого контейнера падал кусочек мяса. Вскоре собака стала лаять в экспериментальной обстановке постоянно. Но лай «подкреплялся» мясом только тогда, когда стучал метроном. В результате собака начинала лаять именно тогда, когда стучал метроном. Таким путем осуществляется дрессировка животных.

Если сравнить условные рефлексы первого и второго типа, то оказывается, что за сходством терминологии скрывается существенное различие между явлениями. В первом случае (см. стр. 34) «подкрепляющим» называют такой стимул, который «безусловно» вызывает вырабатываемую реакцию (А—>-а). Так, в опытах с пищевыми условными рефлексами мясо (подкрепляющий стимул А) «безусловно» вызывает пищевую реакцию — слюноотделение (а). Во втором же случае вообще нет такой реакции, которая «безусловно» вызывает лай. Подкрепление же (мясо) играет роль вознаграждения. В условных рефлексах второго типа нет аналогии с ситуацией А—*-а.

Модель с ящиками первого порядка достаточна для моделирования классических условных рефлексов, но не может обеспечить осуществление условных рефлексов второго типа. Иначе обстоит дело, если использовать ящики высших порядков. Присутствие карточки F в ящике ЕС (рис. 13) моделирует след в памяти того, что событие F произошло после С, которому предшествовав Е. Из сказанного выше ясно, как ящик ЕС может быть использован для вероятностного прогнозирования предстоящих событий, в частности для предсказания вероятности наступления события F.