Например, голубя приучили, что когда он клюнет по белому диску — появляется зернышко. Можно подсчитать, сколько раз за час голубь клюнул по этому белому диску. Количество таких клевков-реакций и будет характеризовать силу рефлекса. Так, в некоторых опытах Скиннера голубь делал за час до 6000 ударов клювом по кругу, прямо как пулеметная дробь.

Используя этот индикатор, удалось установить, что в отношении к оперантным рефлексам справедливы все законы классического условного рефлекса, т.е. генерализация, дифференцировка и угасание неподкрепленного рефлекса.

Но имеют место и некоторые дополнительные законы. Один из них Скиннер назвал законом промежуточных подкреплений. Он заключается в том, что для сохранения оперантного рефлекса его, оказывается, со-всем не нужно непрерывно подкреплять. Например, голубь может сделать сотню «пустых» клевков. Но, если на каждом сто первом мы ему подложим зернышко, то сила рефлекса сохранится. Вот это отношение между подкрепляемыми и неподкрепляемыми действиями, при котором оперантный рефлекс не обнаруживает угасания, Скиннер назвал отношением подкрепления, или пропорцией подкрепления. А для голубя даже пропорция 1/100 вполне достаточная. Скиннер считает, что этот механизм промежуточного подкрепления проявляется и у человека. Например, в азартных играх или лотерее человек 100 раз покупал билет и 1 раз выиграл. Это его уже подкрепляет, чтобы еще 100 раз купил. Это же промежуточное подкрепление, по его мнению, лежит и в основе суеверий. Сто раз у человека не совпадает встреча с черной кошкой и с неприятностью, а один раз совпала. И этого уже достаточно, чтобы еще сто несовпадений на него не действовали, а он ждал сто первого. Неприятностей же у каждого человека немало. Потому шансов, что рано или поздно одна из них совпадет со встречей черной кошки, достаточно, и суеверие подкрепляется.

Второй очень интересный механизм, который был обнаружен еще Павловым, это — явление вторичного подкрепления. Заключается оно в том, что подкрепленный раздражитель, или условный раздражитель сам, в свою очередь, может становиться подкреплением для другого индифферентного раздражителя.

Пусть, например, у собаки выработан условный рефлекс на зажигание лампочки, т.е. она реагирует на нее выделением слюны уже без сопровождения пищи. Теперь делаем так: зажигаем лампочку и одновременно звенит звонок. Достаточно нескольких повторений и уже один только звонок начинает «гнать» у собаки слюну. Здесь, как видим, рефлекс на звонок подкрепляется не самим мясом, а условным раздражителем — лампочкой. Это называют вторичным подкреплением через посредство условного раздражителя. Асам рефлекс называют условным рефлексом второго порядка.

У человека роль такого вторичного подкрепления может выполнять слово, интонация, жест. Так, улыбка учителя, похвала, слово «верно», «молодец» и т.п., сказанные вовремя, активизируют ход научения школьника.

Очень интересные эксперименты на вторичное подкрепление были проведены одним американским ученым с обезьянами. Обезьянам выдали фишки для игры в бридж. Это такие круглые пластмассовые монетки разных цветов — красные, белые, желтые, синие. Бросив монетку в автомат, обезьяна могла за белую — получить апельсин один, за синюю —- два, за красную — глоток воды, за желтую — возвращение в свою клетку и т.д.

Обезьян выдрессировали на это дело, и они совершенно уверенно, когда хотели есть или пить, сейчас же направлялись к нужному автомату, брали соответствующую монету и бросали туда.

Между обезьянами начался обмен монетами. Одна дает другой «апельсинную» монету, та ей дает взамен «водную». Выявились разные характеры. Некоторые обезьяны — транжиры — швыряли сразу все полученные монеты. Половину апельсина съедят, половину разбросают и назавтра «кладут зубы на полку». Другие обезьяны — скаредные — прятали за щеку монеты, копили их там и очень экономно, по одной, только когда хотели кушать, бросали их в автомат и получали пищу.

Заметили несколько случаев, когда самец, обхаживая самку, начинал предлагать ей эти монеты, и самка становилась значительно любезнее.

После этого проделали критический эксперимент. Для того, чтобы получить монеты, обезьяна должна была работать: многократно поднимать довольно с большим трудом тугой рычаг.

Обезьяны между прочим, очень не любят работать, они всячески старались избегать этого колеса. Но когда у обезьяны кончились монеты и хотелось есть, она часами добросовестно трудилась на этом колесе. Получала за это соответствующее количество монет, а потом «покупала» себе на них в автомате бананы.

Рассмотренные механизмы условных рефлексов проливают свет на природу обучаемого поведения, т.е. на навык. Однако, условный рефлекс, все равно классический или оперативный, — это еще не то же самое, что навык.

Рефлекс — это отдельное действие в ответ на раздражитель, а навык — это целая сложная деятельность.

Например, крыса в сложном лабиринте после многократных проб находит, наконец, кратчайший путь и затем всегда бежит уже этим кратчайшим путем. Этот путь может выглядеть так: сначала направо, потом на-лево, потом снова направо, потом прямо, потом — налево и т.д. Ясно, что здесь имеют место не один рефлекс, не одна реакция. Здесь каждый перекресток служит сигналом следующего рефлекса, а в целом развертывается сложная цепь действий. Такими же сложными навыками являются, например, у человека ходьба, речь, письмо, печатание на машинке, вождение автомобиля, управление станком. Короче, почти все виды двигательных действий, которые совершает человек, представляют собой реализацию различных видов навыков.

Как же строится навык?

И здесь, также как в отношении инстинкта, сначала господствовало довольно простое представление. Навык рассматривали просто как цепь условных рефлексов, в которой один условный рефлекс цепляется за другой, завершение одного действия служит сигналом для начала другого.

Иллюстрацией может служить, например, ходьба человека. В рамках приведенной гипотезы механизм ее представляли следующим образом. Прикосновение правой ноги к земле является сигналом, который вызывает действие всего условно-рефлекторного механизма движения левой ноги, и обратно. Так, чередуясь по замкнутому кольцу, действуют несколько двигательных условных рефлексов. Одновременно действует рефлекс сохранения равновесия, связанный с работой вестибулярного аппарата.

Формирование навыка, т.е. научение, с точки зрения этой теории, выглядит, как постепенное «наращивание» условных рефлексов, сцепление их при помощи промежуточных подкреплений.

Эта идея лежит в основе, так называемого, метода последовательных приближений, разработанного Б.Ф. Скиннером. Предположим, что мы хотим выработать у голубя более или менее сложный навык. Например, чтобы он, поставленный на стол, шел к белому экрану, по пути через каждые несколько шагов подпрыгивал, подойдя, кланялся, а затем начинал клевать экран.

Голубя выпускают на стол. Он, естественно, бродит по столу в случайных направлениях. Каждый раз, когда голубь случайно делает шаг, приближающий его к экрану, он получает зернышко. Так вырабатывается оперантный рефлекс приближения к экрану. Затем зернышко начинают давать в тех случаях, когда, направляясь к экрану, голубь случайно подпрыгнет. Затем, когда он случайно опустит голову перед экраном и т.д.

Так оперантные рефлексы у голубя, наращиваясь один на другой, образуют в результате навык довольно сложного поведения.

Итак, по существу, все происходит совершенно случайно. Какие действия из хаотической активности животного закрепятся и как они между собой сцепятся, определяется исключительно воздействиями внешней среды, которая дергает животного, как марионетку, за ниточку подкреплений.

Новейшие исследования показали, однако, что дело обстоит далеко не так просто.

Чтобы определенные действия закрепились, оказалось мало только их подкрепления. Нужна еще врожденная «предрасположенность» животного к такого рода действиям, т.е. соответствие этих действий определенным общим врожденным структурам поведения данного вида животных, определяемым условием их существования.