Как мы принимаем решения

фоторецепторами на сетчатке, фиксирующими проникающие в глаз лучи света. Так же как процесс зрения начинается с сетчатки, процесс принятия решений начинается с колебаний дофамина.

В начале 1970-х, еще будучи студентом-медиком, Шульц заинтересовался этим нейротрансмиттером из-за роли, которую он играет в возникновении симптомов паралича при болезни Паркинсона. Он изучал клетки в мозгу обезьяны, надеясь понять, какие из них участвуют в контроле за движениями тела. Но он не смог ничего обнаружить. «Это был классический случай неудачного эксперимента, — говорит он. — Как ученый я был глубоко разочарован». Однако после многолетних исследований Шульц заметил кое-что странное в этих дофаминовых нейронах: они начинали возбуждаться прямо перед тем, как обезьяне давали награду — к примеру, кусочек банана. (Награды использовались для того, чтобы заставить обезьян двигаться.) «Сначала мне показалось маловероятным, чтобы одна клетка могла отражать такой сложный объект, как еда, — рассказывает Шульц. — Вроде бы для одного нейрона это слишком много информации».

После нескольких сотен экспериментов Шульц начал верить полученным данным: он понял, что случайно обнаружил в мозгу примата механизм поощрения в действии. В середине 1980 годов после публикации ряда знаменательных статей Шульц решил разобраться в этой схеме. Как именно одной клетке удавалось отражать поощрение? И почему она возбуждалась до того, как награда была дана?

Эксперименты Шульца были довольно простыми: он проигрывал громкой звук, ждал пару секунд, после чего вливал в рот обезьяне несколько капель яблочного сока. В ходе эксперимента Шульц исследовал мозг обезьяны с помощью иглы, измерявшей электрическую активность внутри отдельных клеток. Сначала дофаминовые нейроны возбуждались только в тот момент, когда в рот обезьяны попадал сок. Клетки реагировали на саму награду. Однако, как только животное поняло, что звук предшествует появлению сока — для этого потребовалось всего несколько попыток, — те же нейроны начали возбуждаться при появлении звука, а не самого сладкого приза. Шульц назвал эти клетки «предсказывающими нейронами», потому что их больше заботило предсказание появления награды, а не само ее получение. (Эту цепочку можно бесконечно удлинять: например, сделать так, что дофаминовые нейроны будут реагировать на свет, который предшествует звуку, который предшествует соку, и т. д.). Как только эта простая схема была освоена, дофаминовые нейроны обезьяны становились очень чувствительны к малейшим вариациям в ней. Если предсказания клеток оказывались верными и награда появлялась вовремя, у примата происходил краткосрочный выплеск дофамина, возникало чувство удовольствия от того, что он был прав. Однако если схема нарушалась — если звук проигрывался, но сок не поступал, — дофаминовые нейроны обезьяны снижали свою активность. Это явление называется сигналом ошибки предсказания. Обезьяна расстраивалась из-за того, что ее предсказания о соке не реализовались.

В этой системе интерес представляет все, связанное с ожиданиями. Дофаминовые нейроны постоянно порождают схемы, основанные на нашем опыте: если А, то В. Они выучивают, что звук предвещает появление сока или что свет предвещает появление звука, который предвещает появление сока. Хаос реальности превращается в модели взаимозависимостей, позволяющих мозгу предвидеть то, что произойдет дальше. В результате обезьяны быстро усваивают, когда ожидать сладкой награды.

После того как механизм клеточных прогнозов оптимизирован, мозг начинает сравнивать предсказания с тем, что происходит на самом деле. С той минуты, как обезьяна привыкает ожидать сока после определенной последовательности событий, ее дофаминовые клетки внимательно следят за развитием ситуации. Если все идет по плану, дофаминовые нейроны обеспечивают короткую вспышку удовольствия. Обезьяна счастлива. Но если ожидания не оправдались — если обезьяна не получает обещанного сока, — дофаминовые клетки объявляют забастовку. Они немедленно посылают сигнал, сообщающий об их ошибке, и перестают выделять дофамин.

Мозг устроен таким образом, чтобы усиливать шок от этих ошибочных предсказаний. Когда он сталкивается с чем-то неожиданным — например, с точкой на радаре, не вписывающейся в привычную схему, или каплей сока, которая не появляется вовремя, — кора мозга сразу обращает на это внимание. За несколько миллисекунд мозговые клетки поглощены сильной эмоцией. Ничто не может заставить мозг сосредоточиться так, как удивление.

Этот быстрый клеточный процесс начинается в крошечной области в самом центре мозга, богатой дофаминовыми нейронами. Нейробиологам уже несколько лет известно, что этот участок, передняя поясничная кора (ППК), задействован в определении ошибок. Когда дофаминовые нейроны делают ошибочное предсказание — когда они ожидают сока, но не получают его, — мозг порождает особый электрический сигнал, известный как негативность, связанная с ошибкой. Этот сигнал исходит из ППК, так что многие нейробиологи называют это место областью «О черт!».

Значимость ППК предопределена самим устройством мозга. Подобно орбитофронтальной коре ППК помогает обеспечивать связь между тем, что мы знаем, и тем, что чувствуем. Она расположена в точке пересечения двух разных способов мышления. С одной стороны, ППК тесно связана с таламусом — областью мозга, которая отвечает за направленное осознанное внимание. Это значит, что если ППК встревожена каким-то фактором — например, неожиданным ружейным выстрелом, — она может сразу же сосредоточиться на соответствующих ощущениях. Она заставляет человека фиксировать неожиданные события.

Подавая сигнал тревоги сознанию, ППК одновременно посылает импульс в гипоталамус, регулирующий важные аспекты физических функций. Когда ППК обеспокоена какой-то аномалией — например, неправильной точкой на экране радара, — ее беспокойство немедленно переводится в соматический сигнал и мышцы готовятся к действию. За несколько секунд частота сердцебиения увеличивается и в кровь вбрасывается адреналин. Эти физические ощущения заставляют нас реагировать на ситуацию немедленно. Посредством учащенного пульса и влажных ладоней мозг сообщает нам, что медлить нельзя. С этой ошибкой предсказания нужно разбираться немедленно.

Но ППК не только следит за ошибочными предсказаниями. Она также помогает запоминать, чему дофаминовые клетки только что обучились, чтобы быстро адаптировать ожидания к новым условиям. Она усваивает уроки реальной жизни, следя за оперативным обновлением нейронных цепочек. Если, согласно предсказанию, сок должен был появиться после звука, но этого так и не произошло, ППК проследит за тем, чтобы в будущие предсказания были внесены соответствующие коррективы. Краткосрочное ощущение преобразуется в долгосрочный урок. Даже если обезьяна не знает, что именно запомнила ППК, в следующий раз, когда она будет ждать струи сока, ее мозговые клетки окажутся наготове. Они точно знают, когда появится приз.

Это ключевой аспект принятия решений. Если мы не сможем использовать прошлые уроки для будущих решений, нам придется бесконечно повторять собственные ошибки. Если хирургическим образом удалить ППК из мозга обезьяны, поведение примата станет сумасбродным и неэффективным. Обезьяны больше не смогут предсказывать появление награды или разбираться в окружающем мире. Исследователи из Оксфорда провели изящный эксперимент, выявивший это нарушение. Обезьяна держала джойстик, который двигался в двух направлениях: либо снизу вверх, либо вокруг своей оси. В каждый конкретный момент только одно из этих движений приводило к получению награды (кусочка еды). Чтобы сделать эксперимент еще интереснее, ученые изменяли направление, за которое полагалась награда, через каждые двадцать пять попыток. Обезьяне, привыкшей поднимать джойстик для получения награды, теперь нужно было изменить свою стратегию.

Что же делали обезьяны? У животных с неповрежденной ППК это задание не вызывало никаких проблем. Как только они прекращали получать награду за поднятие джойстика, они начинали поворачивать его в другом направлении. Проблема быстро решалась, и обезьяны продолжали получать еду. Однако обезьяны с удаленной ППК демонстрировали важный поведенческий дефект. Когда их переставали награждать за перемещение джойстика в определенном направлении, они все еще могли (в большинстве случаев) изменить траекторию его движения, как нормальные обезьяны. Однако они не могли продолжать пользоваться этой успешной стратегией и скоро начинали двигать джойстик в том направлении, которое не приносило им награды. Они были не в состоянии понять, как постоянно получать еду и как извлечь из ошибки долгосрочный урок. Так как эти обезьяны не имели возможности усовершенствовать свои клеточные предсказания, простой эксперимент приводил их в