Рисунок 6.1. Условные рефлексы: собака Павлова
Выше я привел примеры того, как новые стимулы провоцируют по большей части врожденные алгоритмы поведения; однако некоторые животные могут выработать новые алгоритмы в процессе обучения. Если за произвольными движениями – такими, как нажатие на рейку или кнопку – следует положительный результат (подкрепляющий стимул), вероятность того, что аналогичное поведение повторится в будущем, возрастает. Первым такой эффект в конце XIX века описал Эдвард Торндайк; он выяснил, что если рядом с клеткой кошки, которую долго не кормили, поставить миску с едой, та очень оживится. Случайные движения животного приводили к тому, что дверь клетки открывалась – и кошка получала доступ к еде (рисунок 6.2). Опыт многократно повторялся, и кошка поняла, какие именно движения приводят к открыванию двери. Такое обучение называется инструментальным, потому что поведение является инструментом формирования подкрепляющего стимула.
Рисунок 6.2. Инструментальное поведение: кошки Торндайка
Если говорить об отвращении, лабораторные опыты с инструментальной выработкой условного рефлекса обычно подразумевают научение избеганию: животное учится использовать стимулы-указатели (например, звуки), связанные с опасностью (обычно это удар электрическим током), чтобы эффективно направлять свои действия. Сначала оно замирает; но как только становится ясно, что при появлении звука можно предпринять определенный ряд действий, направленных на избегание вреда, начинает повторять такие все точнее, усиливая формирование реакции избегания.
Бывает, что инструментальное поведение, выработанное за счет подкрепляющих результатов, повторяется настолько часто, что входит в привычку и реализуется, даже если в итоге желаемый результат больше не наступает. Хотя инструментальные привычки могут быть полезны, они также вносят свой вклад в целый ряд самых разных проблем, которые возникают у людей с привыканием: так, например, желание принимать наркотики сохраняется в течение долгого времени после того, как заканчивается ожидаемый от приема эффект. Проведенные недавно исследования доказали, что разновидность инструментального поведения, формирование которой зависит от получаемого результата, наблюдается только у млекопитающих и птиц, а вот привычки могут формироваться у всех позвоночных и даже у некоторых беспозвоночных.
Стимулы, связанные с действиями, от которых напрямую зависит выживание (защита, потребление пищи и воды, воспроизводство), являются теми подкрепляющими факторами (результатами), которые лежат в основе павловских и инструментальных рефлексов. Теперь понятно, почему для лабораторных опытов, в ходе которых изучают инструментальные рефлексы, обычно используют такие подкрепляющие стимулы, как пища, вода и секс, либо избавление от потенциального вреда. Выживание и обучение тесно связаны между собой.