Операторную реакцию в скиннеровском понимании следует отличать от автоматических, чисто рефлекторных реакций, связанных с безусловными и условными рефлексами. Операторная реакция – действие произвольное и целенаправленное. Однако Б.Ф. Скиннер определяет целенаправленность в терминах обратной связи (т. е. воздействия на поведение его последствий), а не в терминах целей, намерений или других внутренних состояний – психических или физиологических. По его мнению, использование в психологии этих «внутренних параметров» предполагает введение сомнительных предположений, ничего не добавляющих к эмпирическим законам, которые связывают наблюдаемое поведение с наблюдаемыми воздействиями среды. Именно эти законы являются реальным средством предсказания и контроля поведения человека и животных. Б.Ф. Скиннер подчеркивал, что «возражение против внутренних состояний заключается не в том, что они не существуют, а в том, что они не имеют значения для функционального анализа». В этом анализе вероятность операторной реакции выступает как функция внешних воздействий – как прошлых, так и настоящих.
В противовес этому подходу, при оперантном обучении подкрепляется только поведение, операции, которые совершает субъект в данный момент. Большое значение имеет и тот факт, что сложная реакция разбивается на ряд простых, следующих друг за другом и приводящих к нужной цели. Так, при обучении голубя сложной реакции – выходу из клетки с помощью нажатия клювом на рычаг Б.Ф. Скиннер подкреплял каждое движение голубя в нужном направлении, добиваясь того, что в конце концов он безошибочно выполнял эту сложную операцию. Такой подход к формированию нужной реакции имел большие преимущества по сравнению с традиционным. Прежде всего, это поведение было намного устойчивее, оно очень медленно угасало даже при отсутствии подкрепления. Б.Ф. Скиннер обратил внимание на то, что даже одноразовое подкрепление может иметь значительный эффект, так как устанавливается хотя бы случайная связь между реакцией и появлением стимула. Если стимул был значимым для индивида, он будет пытаться повторить реакцию, которая принесла ему успех. Такое поведение Б.Ф. Скиннер называл «суеверным», указывая на его большую распространенность.
Не меньшее значение имеет и тот факт, что обучение при оперантном обусловливании идет быстрее и проще. Это связано с тем, что экспериментатор имеет возможность наблюдать не только за конечным результатом (продуктом), но и за процессом выполнения действия (ведь оно разложено на составляющие, реализуемые в заданной последовательности). Фактически происходит экстериоризация, «вынесение вовне» не только исполнения, но и ориентировки и контроля за действием. Что особенно важно, такой подход возможен при обучении не только определенным навыкам, но и знаниям.
Б.Ф. Скиннер отрицательно относился к статистическим обобщениям, считая, что лишь тщательная фиксация реакций отдельного организма позволит решить главную задачу психологии – предсказывать и контролировать поведение конкретных индивидов.
Статистические данные, касающиеся группы (выборки), недостаточны для выводов, имеющих предсказательную силу в отношении каждого из ее членов. Частоту реакций и их силу запечатлевают кривые, которыми, по Б.Ф. Скиннеру, исчерпывается все, что позитивная наука способна сказать о поведении. В качестве образца такого типа исследований предлагалась работа Б.Ф. Скиннера, выполненная им совместно с Ч. Ферстером, «Планы подкрепления» (1957), в которой были собраны в 921 диаграмму данные о 250 миллионах реакций, непрерывно производимых подопытными голубями в течение 70 000 часов.
Подобно большинству бихевиористов, Б.Ф. Скиннер полагал, что обращение к физиологии бесполезно для изучения механизмов поведения. Между тем его собственная концепция «оперантного обусловливания» сложилась под влиянием учения Павлова. Признавая это, Б.Ф. Скиннер разграничил два типа условных рефлексов. Он предложил отнести условные рефлексы, изучавшиеся павловской школой, к типу S. Это обозначение указывало на то, что в классической павловской схеме реакция возникает только в ответ на воздействие какого-либо стимула (S), то есть раздражителя.
Поведение же в «скиннеровском ящике» было отнесено к типу R и названо оперантным. Здесь животное сперва производит реакцию (R), а затем реакция подкрепляется. В ходе экспериментов были установлены существенные различия между динамикой реакции типа R и выработкой слюноотделительного рефлекса по павловской методике.
По мнению Б.Ф. Скиннера, ограниченность традиционной поведенческой формулы S – R состоит в том, что она не учитывает влияния результатов реакции на последующее поведение. Реакция рассматривается только как производное от стимула, только как следствие, но не как детерминанта, которая преобразует организм. Адекватная формула о взаимодействии организма со средой, писал Б.Ф. Скиннер, всегда должна учитывать три фактора: 1) событие, по поводу которого происходит реакция, 2) саму реакцию, 3) подкрепляющие последствия. Эти взаимоотношения являются несравнимо более сложными, чем отношения между стимулом и реакцией.
В педагогике идеи Б.Ф. Скиннера нашли чрезвычайно широкое применение. Сам он объяснял это явление случайностью, как, впрочем, и все свои достижения (верный своей теории, все происходящее в жизни он оценивал как следствие складывающихся обстоятельств).
11 ноября 1953 года, посетив урок арифметики в школе, где училась его дочь, Б.Ф. Скиннер, как он вспоминает в автобиографии, пришел в смятение: «Внезапно ситуация представилась мне совершенно абсурдной. Не ощущая своей вины, учитель нарушал почти все законы, открытые учеными относительно процесса научения».
Под впечатлением от этой картины Б.Ф. Скиннер стал размышлять о факторах подкрепления, которые можно было бы использовать для улучшения преподавания школьных предметов, и спроектировал серию обучающих машин. Так возникло направление, названное программированным обучением. Его быстрое развитие отвечало запросам эпохи научно-технической революции.
Правда, сама по себе идея оптимизации обучения и использования в этих целях специальных машин не связана неразрывно с какой-либо определенной психологической концепцией. Что касается теории Б.Ф. Скиннера, то она смогла (в отличие от других психологических систем) стать основой для поисковых работ по программированному обучению, в силу того что вводила принцип членения процесса решения учебной задачи на отдельные операции, каждая из которых контролируется подкреплением, служащим сигналом обратной связи.