Культурно-историческая психология волевого действия: От прогноза – к поступку. Вячеслав Андреевич Иванников

чем же различие между условными рефлексами первого и второго типа?

      Общая схема условного рефлекса первого типа может быть записана символически следующим образом. Исходное состояние системы таково, что стимул SA вызывает реакцию R_A (S_A→R_A). Другой стимул S_B реакции R_A не вызывает. Если же вслед за стимулом S_B следует стимул S_A, то реакция R_A возникает (S_BS_A®R_A). В этом случае принято говорить, что условный раздражитель S_B «подкрепляется» безусловным раздражителем S_A. Если теперь такое совместное действие стимулов S_B и S_A повторяется достаточное число (n) раз, то уже одного стимула S_B оказывается достаточно, чтобы вызвать реакцию R_A. Коротко это будет выглядеть так:

      S_A вызывает R_A

      S_B не вызывает R_A

      SBSA вызывает RA

      ………….

      …………. n раз

      ………….

      S_B вызывает R_A.

      Для характеристики условного рефлекса второго типа опишем один из экспериментов Конорского. Собаку оставляли в пустом помещении. Время от времени собака без видимой причины лаяла. Каждые несколько минут раздавался стук метронома, и если собака в этот момент лаяла, то из пищевого контейнера падал кусочек мяса. Вскоре собака стала лаять в экспериментальной обстановке постоянно. Но лай «подкреплялся» мясом только тогда, когда стучал метроном. В результате собака начинала лаять именно тогда, когда стучал метроном. Именно так осуществляется дрессировка животных, когда животное учат в ответ на определенный сигнал выполнять определенное действие.

      Если мы теперь сравним условные рефлексы первого и второго типа, то увидим, что за сходством терминологии здесь скрывается существенное различие явлений. В первом случае «подкрепляющим» называют такой стимул, который «безусловно» вызывает у животного вырабатываемую реакцию (S_A→R_A). Так, в опытах с пищевыми условными рефлексами мясо (подкрепляющий стимул) «безусловно» вызывает пищевую реакцию – слюноотделение. Во втором же случае вообще нет такого стимула, который «безусловно» вызывает лай. «Подкрепление» же (мясо) играет другую роль – роль вознаграждения. В условных рефлексах второго типа нет аналога ситуации S_A→R_A

      В нашей модели наличие ящиков первого порядка достаточно для моделирования классических условных рефлексов, но не может обеспечить реализации условных рефлексов второго типа. Иначе обстоит дело, если использовать ящики высших порядков. Наличие карточки F в ящике Е_С моделирует след в памяти того, что событие F произошло после С, которому предшествовало Е. Из вышесказанного ясно, как ящик Е_С может быть использован для того, чтобы осуществить вероятностное прогнозирование предстоящих событий, в частности предсказать вероятность наступления события F.

      Но ящики второго (и более высокого) порядка могут быть использованы еще и другим образом. Под каждой буквой (в нашем примере F, Е, С) можно понимать любое событие, воспринимаемое