Отсутствие контрольной группы

Так называемый эффект Моцарта был дискредитирован, потому что во время экспериментов, показывающих, что прослушивание Моцарта в течение 20 минут в день временно увеличивает IQ, не хватало контрольной группы. Это значит, что одной группе давали слушать Моцарта, а второй не давали никакого задания. Ничегонеделанье не есть форма адекватного контроля, и оказалось, что если давать испытуемым задание — какое угодно, — то эффект исчезает. Эффект Моцарта возникал не от музыки Моцарта, повышающей IQ. Такой эффект наблюдался скорее на контрасте с той скукой, которую испытывала вторая группа, чей IQ временно снижался из-за ничегонеделания.

Если вы приведете в лабораторию 20 человек, страдающих головной болью, дадите им свое новое лекарство, способное творить чудеса, и десяти из них и правда станет лучше, это будет означать, что ничего-то вы не узнали. Некоторые виды головной боли проходят сами собой, с течением времени. Сколько их? Никому не известно. Вам нужно было бы иметь контрольную группу, состоящую из людей приблизительно одного возраста и происхождения, страдающих схожей формой головной боли. А так как даже сама вера в то, что вам может стать лучше, порой приводит к улучшению самочувствия, вам придется дать контрольной группе что-нибудь такое, что подкрепит эту веру, да так же сильно, как и изучаемое фармакологическое средство. Следовательно, потребуется хорошо всем известное плацебо — вещество, которое выглядит так же, как волшебная пилюля, устраняющая головную боль. Но предложить его нужно так, чтобы никто из испытуемых ничего не заподозрил, пока эксперимент не подойдет к завершению.

Малкольм Гладуэлл в своей книге David and Goliath: Underdogs, Misfits, and the Art of Battling Giants46 распространил неверное заключение, заявив, что те, кто страдает дислексией, могут на самом деле считать себя счастливчиками. Он заставил многих родителей верить, что их дети-дислексики не должны получать то специальное образование, в котором так нуждаются. Гладуэлл допустил ошибку из-за отсутствия условий контроля, и мы не знаем, насколько успешнее могли бы стать отобранные им дислексики, будь у них возможность улучшить условия своего обучения.

Отсутствие контрольной группы сложнее обнаружить в повседневных разговорах, нежели в научных заявлениях, — просто потому, что там мы не ищем. Вот вы читаете — и признаете разумным — новое исследование, в котором говорится, что если ложиться спать и просыпаться в одно и то же время, повысятся продуктивность и креативность. Ваша подруга, художница, успешная во всех отношениях, возражает. Она говорит, что всегда ложилась спать тогда, когда хотела, частенько засиживаясь до утра, а иногда и проводила в постели по 20 часов кряду, — при этом все у нее хорошо. Видите, в этом примере нет контрольной группы. Насколько более продуктивной и креативной могла бы стать девушка, придерживайся она всегда четкого режима?[125] Нам неизвестно.

Братья-близнецы были разлучены после рождения и выросли отдельно друг от друга — один из них в нацистской Германии, а второй в Тринидаде и Венесуэле[126]. Одного воспитали в католической церкви (позже он стал членом гитлерюгенда), второго как иудея. Они воссоединились 21 год спустя и выяснили, что у них было поразительно много общего в поведении[127]. Многие восхищенные свидетели приписывали эти совпадения генетике: оба чесали голову безымянным пальцем, оба подкрадывались к незнакомцам и громко чихали, находя это забавным. Оба были небольшого роста, носили аккуратно подстриженные усики и прямоугольные очки в округлой проволочной оправе. Оба ходили в голубых рубашках с эполетами и карманами на военный манер. У них была одинаковая походка, и они в одинаковых позах сидели в кресле. Оба любили масло и острую еду, спускали воду в туалете до и после использования и заглядывали в конец книги, прежде чем ее прочесть. Оба обматывали свои ручки и карандаши изолентой, чтобы те меньше скользили в руке.

Подобные истории могут заставить вас задуматься о том, какое влияние оказывают гены на наше поведение. А может, мы всего лишь автоматы и наши действия предопределены? А как иначе объяснить такие совпадения?

Итак, существует два способа, но обоим недостает контрольной группы. Социальный психолог, возможно, скажет, что обычно к людям, которые похожи внешне, относятся схожим образом. С красавчиками обращаются иначе, нежели с теми, кто некрасив, к людям высоким отношение не такое же, как к низкорослым. Если по вашему лицу видно, что вы человек честный и не своекорыстный, то к вам будут относиться не так, как относились бы, будь выражение лица иным. Поведение братьев-близнецов сформировалось под влиянием того мира, в котором они жили. Нам нужно было бы иметь контрольную группу людей, не имеющих никаких родственных взаимоотношений, но которые все же выглядели бы поразительно похожими и были воспитаны отдельно друг от друга. При соблюдении этих условий в «естественном эксперименте» с близнецами, разлученными в детстве, мы бы получили четкий результат.

Есть тысячи вещей, которые мы регулярно делаем в течение жизни. Статистик или генетик-бихевиорист сказал бы, что у двоих произвольно выбранных незнакомцев может обнаружиться поразительное сходство, например в выборе одежды, уходе за собой, склонности к розыгрышам и т. д.[128] Нужно просто долго за ними наблюдать и хорошенько к ним присматриваться. Не имея контрольной группы, объединяющей незнакомцев и тех, кто проводит эксперимент и изучает их привычки, мы не знаем наверняка, что стало движущей силой в истории с близнецами: генетика или чистой воды случайность. Возможно, все же огромную роль играет генетика, но есть вероятность, что не такую большую, как нам кажется.

Избирательный подход

Наш мозг устроен так, чтобы придумывать истории, по мере того как он впитывает все многообразие мира, в котором каждую секунду происходит миллиард событий. Конечно, бывают совпадения, которые на самом деле ничего не значат. Если вы думаете о своей подруге, с которой давно не общались, и вдруг в эту минуту она вам звонит, это не значит, что один из вас ясновидящий. Если вы три раза подряд выиграете в рулетку, это не значит, что у вас началась полоса везения и нужно ставить последние деньги. Если механик, не имеющий ни одного сертификата, починил вашу машину, это не означает, что он справится с этим и в следующий раз, — возможно, ему просто повезло.

Предположим, у вас есть гипотеза, что избыток витамина D приводит к недомоганию; вы даже можете найти доказательства, подтверждающие эту точку зрения. Но если вы всецело настроены на поиски только доводов в поддержку своей идеи, ваше исследование нельзя назвать качественным, потому что вы игнорируете доказательства обратного — их может быть мало, а может и много, но вы о них не узнаете, потому что не обратили на них внимания. Ученые это называют «избирательный подход» — вы выбираете только те данные, которые доказывают вашу гипотезу. Качественное же исследование требует сохранения объективности в любом вопросе. Старайтесь честно рассматривать все «за» и «против» и только потом формировать свое мнение, исходя из имеющихся доказательств (а не из эмоций типа «Надо же! Лучше бы это было по-другому»).

Избирательный подход идет рука об руку с ограниченностью точки зрения. Такое случается, когда информация, к которой у вас есть доступ, оказывается нерепрезентативной по отношению к целому. Если вы смотрите на город из окна поезда, то видите только его часть, и не обязательно репрезентативную: вы ограничены окном, а значит, получаете искаженную информацию. Кроме того, поезда шумят. Чем люди более состоятельны, тем дальше они селятся от железнодорожных путей, значит, те, кто живет ближе к ним, как правило, не очень состоятельны. Если все, что вам известно о городе, — кто живет у путей, значит, вы не видели всего города.

Конечно, все это связано с дискуссией о сборе данных, которую мы начали в части 1, и важностью наличия репрезентативных выборок. Мы ведь стараемся понять, как устроен мир — или по меньшей мере новый город, мимо которого проезжаем на поезде, — и хотим получить альтернативные объяснения тому, что видим, или тому, что нам говорят. Удачное альтернативное объяснение, проливающее свет на многие ситуации, заключается в том, что вы видите только часть общей картины, а то, что скрыто от вашего взгляда, может выглядеть совсем иначе.

Например, ваша сестра гордо демонстрирует рисунок своей пятилетней дочери. И он может быть восхитительным! Если вы любите живопись, поставьте его в рамочку. Ну а если вы обдумываете вариант, инвестировать ли деньги в племянницу как в будущего великого художника мирового масштаба, то вам нужно задать несколько вопросов: кто отобрал эту работу? Кто обрезал рисунок? Каким по размеру был оригинал? Сколько рисунков было у маленького Пикассо до этого? Что было сначала, а что потом? Перебирая работы и отсеивая лишнее, вы можете наткнуться на серию выдающихся работ или удачный фрагмент чего-то более крупного (и менее впечатляющего), что было отобрано учителем.

При чтении заголовков мы тоже сталкиваемся с ограниченностью точки зрения. Например, вы видите: «Американцев, поддерживающих новое законодательство, втрое больше, чем тех, кто выступает против». И даже если окажется, что исследование было проведено на репрезентативной и достаточно большой выборке американцев (о необходимости этого мы писали в части 1 нашей книги), нельзя говорить, что большинство жителей США поддерживают законодательство. Может получиться так, что 1 % выступает против, 3 % поддерживают, а 94 % воздерживаются. Примените тот же принцип, читая заголовок про выборы: «На президентских праймериз кандидата А поддерживают в пять раз больше республиканцев, чем кандидата B». Может, это и правда, но этот заголовок может скрывать, что за кандидата C отданы 80 % голосов.

Попробуйте подбросить монетку десять раз. Вы «знаете», что в половине случаев должна выпасть решка. Но есть вероятность, что этого не случится. Даже если вы подбросите ее тысячу раз, решка может и не выпасть ровно 500 раз47. Теоретические вероятности достигаются только в случае неограниченности количества попыток. Чем больше раз подбрасывать монетку, тем ближе соотношение орлов и решек будет к пропорции 50 на 50. Это парадоксально, но существует вероятность, которая близка к 100 %, что где-то в череде тысячи бросаний у вас выпадет пять раз подряд решка. Почему же это так парадоксально? Эволюция не подготовила нас к интуитивному пониманию случайности. Случайные бросания обычно не чередуются строго (орел — решка — орел — решка), бывают длинные промежутки постоянства, когда выпадают одни решки или одни орлы. И тогда можно кого-нибудь легко обмануть: просто снимите на телефон, как вы подкидываете монетку тысячу раз подряд. Перед каждым броском произносите следующую фразу: «Это будет первая решка из пяти подряд». И если у вас выпадет решка, прежде чем кидать монетку еще раз, скажите: «Это будет вторая решка из пяти подряд». Если в следующий раз выпадет орел, начните заново. Если нет, перед следующим броском скажите: «Это будет третья решка из пяти подряд». А затем просто вырежьте сцену с пятью решками подряд. Вот вы всех и перехитрили! Если вам действительно хочется впечатлить кого-нибудь, попробуйте сделать это десять раз подряд! (Шанс на то, что, подбросив монетку тысячу раз, вы получите решку десять раз подряд, равен всего 38 %. Но посмотрите на это с другой стороны: если попросить сто человек в одной комнате подбросить монетку пять раз, то шанс, что у одного из них пять раз подряд выпадет решка, равен 96 %.)[129]

Опыт общения 75-летнего мужчины, занимающего высокий пост, с полицейскими Нью-Йорка сильно отличается от впечатлений 16-летнего темнокожего подростка — их опыт определяется тем, что они видят. Последний может заявить, что его регулярно задерживают безо всяких на то причин и обращаются с ним как с преступником, а это уже расовая дискриминация. А 75-летний мужчина может даже не понимать, как такое возможно: «Мы всегда с этими полицейскими так мило общались».

Пол Маккартни и Дик Кларк скупили все пленки со своими выступлениями на экране за 1960 год — якобы чтобы контролировать, как журналисты преподносят историю их успеха[130]. Если вы ученый, проводящий исследование, или документалист, ищущий архивные кадры, то вы ограничены тем, что вам показывают. Получив данные или доказательства в поддержку какого-то заявления, задайте себе вопрос, репрезентативно ли то, что вам предоставили, по отношению к целой картине.