Рис. 50. Как классическое условнорефлекторное, так и инструментальное научение может быть объяснено теорией одновременного возбуждения.

Развитие оперантных условных рефлексов скорее всего связано с удовлетворением какой-нибудь физиологической потребности (например, голода) в процессе подкрепления. Согласно Халлу (Hull), для того чтобы поведение прочно закрепилось, в его основе должно лежать стремление удовлетворить какую-то насущную потребность. Двигательная реакция, достигающая этой цели, тем самым ослабляет побуждение. К этому вопросу мы вернемся позже.

Программированное обучение: игральные автоматы. На основе работы Скиннера оперантное научение используется во многих областях человеческой деятельности. Созданные в последнее время теории программированного обучения тоже содержат элементы этих рефлексов, поскольку обратная связь у обучающегося используется для подкрепления. Программы с подкреплением используются также при конструировании различных игральных автоматов: время от времени играющий получает награду (подкрепление), чтобы он не потерял интерес к игре, но нажатие на рычаг (или вкладывание монеты) должно быть достаточно частым, чтобы владелец автомата получал прибыль.

Ошибочное научение; суеверия. Скиннер исследовал также биологическую основу суеверий и нашел, что у животных можно обнаружить формы поведения, сходные с различными суевериями у человека. Он установил, что в их основе лежит образование какой-то «ошибочной» связи в головном мозгу, т. е. выработка неадекватного поведения.

«Заблуждающиеся» голуби. Неоправданное, случайное подкрепление (награда) в опытах с животными может вызывать у них «заблуждения». Примером такого случайного процесса может служить следующая экспериментальная ситуация. Голубя помещают в скиннеровский ящик, на одной из стенок которого расположены освещенные разноцветные кружки. В этой же стенке проделано отверстие, через которое голубь получает пищу каждый раз, когда он клюнет, скажем, красный кружок. После нескольких проб голубь начинает клевать его все чаще, и таким образом вырабатывается оперантный условный рефлекс. Корм подается после определенного числа ударов клювом, например после 20 или 50, и птица приспосабливается к такой частоте подкрепления. Клевание оказывается довольно регулярным и прекращается только на время получения пищи, а затем возобновляется. Такая форма поведения может сохраняться в течение нескольких дней. Если из-за какой-то неисправности автоматической кормушки голубь неожиданно получит пищевое подкрепление, например после случайного движения правой ноги, он будет снова и снова повторять это движение, так как в высших центрах между этой двигательной реакцией и ее результатом (получением пищи) уже образовалась связь. Такова вкратце экспериментальная модель ошибочного поведения.