На одной из стен этого помещения, примерно в десяти дюймах от пола, расположен полупрозрачный круг, который может загораться красным светом. При помощи электровыключателя круг связан с внешней аппаратурой, записывающей и контролирующей события внутри ящика. Она устроена так, что, как только к кругу приложено давление, фиксируется реакция и голубю дается пища через кормушку, прикрепленную к стене помещения как раз под диском. Голубь может оказывать на круг давление, клюя его, и эта та реакция, которую мы хотим выработать и контролировать.

Чтобы голубь клюнул круг в первый раз, мы формируем его поведение. Вероятность того, что голубь случайно клюнет круг, чрезвычайно низка, но ясно, что мы не можем увеличить вероятность посредством пищевого подкрепления, пока реакция впервые не появится. Реакция клевания формируется подкреплением последовательных приближений к реакции клевания. Сначала мы учим птицу есть из пищевого хоппера, когда он открыт. Это поведение легко обусловливается, и вид открываемого хоппера становится стимулом для еды. Затем пища предоставляется лишь тогда, когда голубь находится около диска. Это увеличивает вероятность того, что птица будет вновь стоять около диска. Затем мы предъявляем пищу только тогда, когда птица поднимает голову, стоя около диска, затем – когда ее клюв находится в готовом к удару положении в отношении диска и т.д. Наконец, после этих последовательных приближений птица впервые клюнет диск. Разумеется, немедленно появляется еда. Вскоре после этого возможно повторное клевание, и вновь появится еда. Если подкрепление возникает в каждом случае, когда птица клюет, скоро возникает реакция клевания. Это обозначается как режим постоянного подкрепления. Однако, если с пищевым хоппером ничего не происходит, когда птица клюет, тогда уровень клевания снижается, и очень скоро вернется к тому, что было, когда птица впервые попала в помещение. Клевание вообще редко возникает: подкреплявшаяся прежде реакция угасла.

Предположим, что мы не перестаем вообще задействовать хоппер, а делаем это иначе. Например, прибор может быть запрограммирован так, что пища доступна голубю, если он клюет каждые пять минут. Если подкрепление следует через определенные временные интервалы оно называется "интервальным подкреплением"; если этот интервал не меняется (например, каждые пять минут или каждые десять минут), мы имеем режим фиксированного интервального подкрепления. Вместо подкрепления через постоянные временные интервалы, исследователь может избрать подкрепление в режиме меняющихся интервалов. Здесь, хотя подкрепление возникает в среднем через пять минут, реальные интервалы будут варьировать вокруг этой величины. Таким образом, в каждый момент есть низкая и постоянная вероятность доступности пищи. В этих условиях голубь реагирует постоянным коэффициентом клевания. Большинство клевков не подкрепляется, но те, что подкрепляются, служат установлению окончательного уровня реагирования. Если хоппер отключен и клевание больше не подкрепляется, реакция опять угасает. На этот раз это происходит много медленнее, чем в случае непрерывного подкрепления, и клевание происходит много раз, пока угасание не завершено.