Текст книги "Псевдонаука и паранормальные явления: Критический взгляд"

Автор книги: Джонатан Смит

сообщить о нарушении

Текущая страница: 13 (всего у книги 34 страниц) [доступный отрывок для чтения: 13 страниц]

Наука и случайность

Научные эксперименты призваны исключить случайность как альтернативное объяснение. Мы с вами можем на неформальном уровне пользоваться теми же методами. В статистике и исследованиях существует система правил, процедур, «сдержек и противовесов», которые могут помочь нам разобраться в полученных данных.

Дублирование и размер выборки

Делать общие выводы на основе единственного примера нелогично и нечестно. Испорченное яблоко, принесенное вами из магазина, вполне может оказаться исключением из правила. Точно так же одного-единственного научного исследования недостаточно для убедительного доказательства того или иного утверждения. Слишком многое может пойти наперекосяк. Исследователи могут оказаться бесчестными людьми. Кроме того, иногда происходят неожиданности. Чтобы защититься от этого, ученым для подтверждения любого открытия требуются дополнительные эксперименты (проведенные другими – незаинтересованными – исследователями и лабораториями). При этом каждое исследование, чтобы быть убедительным, должно включать в себя достаточное количество участников; только тогда его результаты можно считать значимыми. Как правило, данных от одного-двух человек недостаточно, их можно отнести скорее к свидетельствам очевидцев (глава 3).

Контрольные группы

Хороший способ исключить случайные флуктуации в качестве возможной причины происходящего – включить в исследование контрольную группу. Может быть, все учащиеся автошкол перед сдачей экзамена по вождению в течение недели пьют только зеленый чай. Само по себе такое открытие почти ничего не означает, потому что мы не знаем, от какого уровня следует вести отсчет. Необходима контрольная группа учащихся, которая будет сдавать экзамен без зеленого чая. Правильно организованная контрольная группа позволит нам ответить на вопрос: «В сравнении с чем?..»

Прекращение эксперимента в произвольный момент

Мы уже видели, что совершенно случайные события обычно следуют одно за другим – кучками или полосами. Если бы вам пришлось изучать чисто случайное явление – к примеру, зависимость между школьными оценками и размером ноги, – вы рано или поздно обязательно столкнулись бы с несколькими подряд случаями, когда отличные оценки получают люди с маленькой ногой. Скорее всего, при дальнейших испытаниях этот перекос выровнялся бы. А может быть, вы вскоре встретили бы сразу несколько человек с маленькой ногой и плохими отметками. Но! Что произойдет, если вы прекратите исследование сразу после встречи первой группы двоечников с маленькой ногой? Это будет мошенничество. Формально ваше исследование подтвердит существование связи между размером ноги и коэффициентом интеллекта. Поэтому нельзя продолжать исследование до тех пор, пока не будут получены желаемые результаты, а потом произвольно прекратить процесс. К примеру, именно в этом можно заподозрить Гоклена (Gauquelin, 1974), известного исследователя астрологии. Можно предположить, что он обрабатывал свои данные до тех пор, пока не наткнулся на некую кажущуюся закономерность – сомнительную связь между нахождением планеты Марс в двух секторах неба и атлетизмом родившегося человека (глава 5). Почему мы можем сказать, что Гоклен просто прекратил свой эксперимент в произвольный, устраивающий его момент? Дело в том, что очевидно вытекающий из его исследований астрологический прогноз не работает, да и обнаруженная им будто бы связь не относится к тем, о которых обычно говорят астрологи.

Предпочтения при публикации

Мы уже видели (глава 3), что исследователи предпочитают публиковать необычные и обязательно положительные результаты. Неудачи их не интересуют. Журналы делают то же самое и отбирают для публикации преимущественно положительные результаты. Если вы проведете тщательный эксперимент и установите, что, на тучи кричи не кричи, дождь пойдет вне зависимости от ваших усилий, то вы вряд ли станете посылать этот результат для публикации в научный журнал. А если пошлете, то журнал наверняка откажется публиковать вашу статью. То, что у положительных результатов больше шансов на публикацию в научном журнале, не секрет. Скорее всего, именно предпочтениями при публикации объясняются многие «научные демонстрации» паранормальных явлений. Рассмотрим это с точки зрения теории вероятностей. Так, мы можем предположить, что из 100 исследований некоего паранормального явления пять случайно дадут положительный результат. В данном случае 5% – это вероятность случайной флуктуации в том случае, если на самом деле этого паранормального явления не существует вовсе. При этом из 100 исследований именно 5 положительных результатов со временем, скорее всего, будут опубликованы, создавая у читателей ложное впечатление о том, что существование этого паранормального явления доказано.

Чтобы исключить влияние предпочтений при публикации, исследователям и журналам следовало бы публиковать все без исключения результаты – и положительные, и отрицательные. Журналы, посвященные исследованию паранормальных явлений, начинают это делать; они требуют, чтобы исследователи еще до проведения регистрировали намеченные исследования, тогда отрицательные результаты не останутся незамеченными.

Еще один метод борьбы с предпочтениями при публикации – метаанализ множества различных исследований по данному вопросу, позволяющий определить, сколько негативных исследований потребовалось бы, чтобы свести на нет некий положительный результат. Метаанализ – очень популярный инструмент обработки данных парапсихологических исследований, поэтому мы подробнее рассмотрим его в главе 12.

Надо отметить, что одно из самых серьезных открытий, сделанных в процессе научных исследований паранормального, – это отрицательная корреляция между качеством проводимого исследования и полученными свидетельствами в пользу паранормального (Bausell, 2007; Hines, 2003). Плохо спланированные дешевые исследовательские программы гораздо чаще дают положительные результаты, чем правильно организованные строгие исследования. В остальных областях научных исследований все обстоит с точностью до наоборот. Обычно чем лучше организовано исследование, тем более вероятен положительный результат.

Краткий итог: психологическое искажение

Да, мир чисел обманчив. 11рактически у каждого из нас есть неверные представления о вероятности тех или иных событий. Иногда мы воспринимаем совершенно обычные случайные совпадения как некую закономерность или даже как свидетельство в пользу паранормального. Некоторые люди особенно склонны к подобным ошибкам. Блэкмор и Тросянко (Blackmore & Troscianko, 1985) обнаружили, что люди, которые верят в паранормальные способности человека, особенно склонны к ошибкам при оценке вероятностей. Это явление можно назвать психологическим искажением. Так, в ходе одного из исследований людям, верящим и не верящим в паранормальные явления, предлагалось попытаться силой мысли повлиять на результат автоматического подбрасывания монетки. Но сначала исследователи попросили тех же людей оценить число орлов в серии, которое можно ожидать при чисто случайном распределении. В оценках верующих (в паранормальные явления) участников – но не их неверующих собратьев – проявилась интересная закономерность, которую можно назвать искажением случайного среднего. Именно эти люди недооценивали число орлов, которые можно получить случайно. Почему это важно? Потому что, когда Блэкмор и Тро– сянко просили участников эксперимента повлиять на поведение монетки силой мысли, полученные ими совершенно случайные результаты казались верующим в паранормальное неслучайными (они и были неслучайными с их искаженной заранее точки зрения). Из-за этого искажения верующие были более склонны поверить в то, что им удалось при помощи паранормальных сил повлиять на поведение монетки. В более общем плане такое искажение показывает, как наши верования и ожидания мо1ут повлиять на восприятие, – тема, которую мы рассмотрим подробнее в следующей главе.

СВЕРИМСЯ С РЕАЛЬНОСТЬЮ

Как могли бы эвристика доступности, ложный оптимизм, математическая неграмотность и кластеризация дан– ныхусиливать готовность людей верить в паранормальное?

Как определить «значимость» научного открытия

В каких случаях вы принимаете научное открытие всерьез? Когда оно «значимо»?

Паранормальные события по определению являются экстраординарными и выходят за рамки мира обычной науки. Если вы делаете ошибочный вывод о том, что результат не случаен, а имеет конкретную причину, то это ошибка I рода. (Ошибочный вывод

том, что реальный неслучайный эффект – всего лишь результат случайности, называется ошибкой II рода.) Говоря проще, ошибка

рода – это когда вы считаете, что «происходит что-то необычное», тогда как на самом деле все идет своим чередом. В данном тексте мы рассмотрим процедуру сверки с реальностью, призванную выявлять ошибки I рода.

Пусть ученый проводит эксперимент с целью определить, стоит ли за неким явлением – скажем, необычайной способностью выигрывать в лотерею, читать мысли или предсказывать результаты выборов – какая-то конкретная причина или это чистая случайность. Пусть далее наш ученый получит подряд несколько позитивных результатов. В конце концов игрок в покер может иногда получить удачные карты, в этом нет ничего таинственного. Да и в лотерею люди иногда выигрывают.

К счастью, существуют статистические процедуры для оценки вероятности ошибки I рода. К примеру, мы считаем, что выигрыши в лотерее распределяются совершенно случайно и честно, так что выигрыш каждого человека зависит исключительно от удачи. При этом некоторым людям все же выпадают выигрыши. Если выигрышей больше, чем можно было ожидать, мы можем заподозрить, что лотерея работает не совсем случайно. Возможно, кто-нибудь жульничает или здесь работают паранормальные силы. Чтобы разобраться в происходящем, статистики вычисляют, сколько выигрышных билетиков должно быть предъявлено, чтобы мы сделали вывод о том, что происходит нечто странное. Может быть, по законам случайности на один миллион участников должно приходиться 10, 100 или даже 1000 выигрышей. Любое число, превышающее 10, 100 или 1000, вызовет подозрения. Но как выбрать допустимое число выигрышей? Все зависит от того, чем вы готовы рискнуть. Насколько вы боитесь совершить ошибку I рода.

«Уровень риска» совершения ошибки I рода называется а-уровнем. Традиционно многие ученые ориентируются на а-уровень 5% (0,05), но иногда используются и другие уровни ( 1% (0,01) и 0,1% (0,001)). Так, а-уровень 5% означает, что лотерея становится по-настоящему подозрительной. Если же уровень уверенности не превышает 5%, т.е. вероятность ошибки не превышает 1/20. Иногда уровень вероятности для краткости называют р-величиной. В научных докладах можно часто встретить следующие утверждения (не забывайте, что при этом р лучше, т.е. меньше, 0,05, и, соответственно, результаты эксперимента значимы):

Мы сравнили уровень успешности предсказания пятидесяти экстрасенсов и пятидесяти людей без заявленных паранормальных способностей. Предсказания экстрасенсов оправдывались в 45% случаев, предсказания обычных людей – в 41 % случаев.

Предсказания экстрасенсов были точны значительно чаще, чем предсказания обычных людей (р = 0,02). Вывод: результаты эксперимента свидетельствуют о том, что экстрасенсы могут предсказывать будущее.

Если эксперимент не подтвердил точности предсказаний экстрасенсов, отчет может выглядеть примерно так:

Мы сравнили уровень успешности предсказания пятидесяти экстрасенсов и пятидесяти людей без заявленных паранормальных способностей. Предсказания экстрасенсов оправдывались в 44% случаев, предсказания обычных людей – в 43% случаев. Превышение успешности предсказаний экстрасенсов по отношению к предсказаниям обычных людей не было статистически значимым (р = 0,12). Вывод: результаты эксперимента не подтверждают вывод о том, что экстрасенсы могут предсказывать будущее.

Обратите внимание: ученые говорят о «статистической значимости» явления, если полученная в ходе эксперимента /^-величина не превышает принятого в эксперименте уровня значимости (а-уровня). Утверждение «Этот результат является статистически значимым, р = 0,02» можно перевести примерно так: «Мы уверены, что этот результат – не просто удача или случайность. Наша статистика показывает, что вероятность ошибки составляет всего 2 шанса из 100, а это лучше, чем уровень 5/100, принятый большинством ученых».

Способ, при помощи которого вычисляется а-уровень для статистических данных, останется за пределами этой книги. Однако заметим, что эта задача может оказаться весьма сложной. К примеру, многократное повторение одного и того же эксперимента может создавать совершенно особую проблему, о которой иногда забывают исследователи паранормального. Любой эксперимент сам по себе напоминает бросание монетки. Со временем при многократном повторении вы можете по чистой случайности получить желаемый результат. В гипотетическом исследовании предсказаний экстрасенсов и обычных людей, о котором мы говорили выше, некоторые участники (как экстрасенсы, так и неэкстрасенсы), вполне возможно, сделали удачное предсказание случайно. Мы уже объяснили, что статистики умеют оценивать уровень вероятности и учитывать его при обработке результатов. Точно так же, если повторить этот эксперимент сотни раз, исследуя каждый раз по 50 экстрасенсов и неэкстрасенсов, в некоторых случаях доля успешных предсказаний у экстрасенсов обязательно окажется выше – по чистой случайности. Минимум, что вы должны сделать, – это изменить а-уровень так, чтобы учесть возросший риск ложноположителыюго решения.

Исследователи, которые мног ократно повторяют один и тот же эксперимент (или учитывают большое количество параметров водном эксперименте), вынуждены принимать дополнительные меры, чтобы исключить ложногтоложительное решение. Некоторые из них пользуются тестом, придуманным Карло Эмилио Бонферрони (Bonferroni, 1935), и делят а-уровень (0,05 или 0,01) на число экспериментов (или параметров), чтобы скомпенсировать тем самым возросшую вероятность ошибочного результата. Новый а-уровень отражает более жесткие критерии, при помощи которых придется в этом случае оценивать достоверность проведенного исследования. Ведь, если провести аналогию с бросанием костей, вы увеличиваете вероя т ность выигрыша за счет большого количества бросков. К примеру, если вы провели 100 экспериментов по экст расенсорному предсказанию будущего (или один эксперимент, в котором попросили участников предсказать поведение 100 отдельных трупп объектов, таких как спортивные матчи, номера лотерейных билетов, природные события и т.д.), то новый а-уровень у вас будет 0,0005 (0,05/100). Таким образом, если после статистической обработки результатов вашего исследования окажется, что уровень достоверности составляет всего 0,05. В данном случае это будет означать, что значимых результатов вам получить не удалось.

Возможно, вы плохо разбираетесь в статистике и с трудом понимаете, о чем идет речь. Тем не менее Бонферрони снабдил нас очень удобным инструментом оценки, пользоваться которым совсем не трудно. 11ри помощи этого инструмента вы всегда можете понять, не возбуждают ли результаты того или иного исследования ложных надежд. Сосчитайте число экспериментов, о которых идет речь. Или число различных «исходящих» переменных, которые подвергались исследованию. Разделите 0,05 на число экспериментов или переменных и получите новое пороговое значение. Уровень достоверности исследования, о котором идет речь, должен быть не выше этого значения (т.е. меньше или равен ему). Только тогда вы можете быть уверены в значимости полученных результатов. Ниже приведен гипотетический отчет об исследовании зеленого чая. Можете ли вы определить, почему он вводит читателя в заблуждение?

Мы проверили действие зеленого чая на успеваемость. В двойном слепом исследовании с применением плацебо, 20 учащихся получали зеленый чай, а еще 20 – подкрашенную воду, похожую на зеленый чай. Участники эксперимента пили чай каждый день в течение месяца. Мы проверяли 5 переменных: средний балл, экзаменационные оценки, оценки за письменные работы, оценки за работу в классе и посещаемость. За письменные работы те, кто пил зеленый чай, получили в среднем «5», а те, кто пил воду, – в среднем «4». Это значимая разница, р = 0,02. Вывод: зеленый чай повышает успеваемость.

А вот тот же отчет с поправкой на тест Бонферрони:

Мы проверили действие зеленого чая на успеваемость. В двойном слепом исследовании с применением плацебо, 20 учащихся получали зеленый чай, а еще 20 – подкрашенную воду, похожую на зеленый чай. Участники эксперимента пили чай каждый день в течение месяца. Мы проверяли 5 переменных: средний балл, экзаменационные оценки, оценки за письменные работы, оценки за работу в классе и посещаемость. Лучше всего зеленый чай сказался на качестве письменных работ. Здесь те, кто пил зеленый чай, получили в среднем «5», а те, кто пил воду, – в среднем «4». Разница в оценках дает нам р = 0,02. Однако этот результат не удовлетворяет а-уровню с поправкой Бонферрони (0,01). Вывод: зеленый чай не повышает успеваемость.

Обезьяны печатают на машинке Шекспира: теорема о бесконечных обезьянах

J 1

Теорема о бесконечных обезьянах – одно из популярных приложений закона больших чисел. Возможно, вам приходилось слышать о том, что если дать бесконечному числу обезьян бесконечное число пишущих машинок и много-много времени, когда-нибудь они напечатают полное собрание произведений Шекспира. Хотите верьте, хотите нет, но это заявление породило множество споров. Сторонники теоремы утверждают, что она верна. Скептики пытаются апеллировать к эксперименту и логике.

Рис. 6.1. Обезьяны печатают Шекспира

Критики любят вспоминать исследование, проведенное в 2003 г. студентами 11лимутского университета (Англия) за счет полученного гранта (Elmo, Gum, Heather, Holly, Mistletoe et al., 2002). Шесть макак были оставлены наедине с компьютерами на месяц, чтобы посмотреть, что они напечатают. Шекспировского текста не выдала ни одна из них. Вместо этого глава группы взял камень и начал крушить все вокруг. В большинстве своем обезьяны значительную часть времени справляли на клавиатуру естественные надобности. Текстовый результат составил всего 5 страниц, содержавших преимущественно букву S, а такжебуквы A, J, L и М. Эта работа была опубликована под заголовком Notes towards the complete works of Shakespear («На пути к полному собранию сочинения Шекспира») (Elmo et al., 2002). Если вам интересно, можно ознакомиться с ней в Интернете.

Киттель и Крёмер (Kittel & Kroemer, 1980) утверждают, что с практической точки зрения теорема о бесконечных обезьянах не может быть верна, потому что обезьян потребовалось бы больше, чем может вместить наша Вселенная, а необходимое время превзошло бы возраст Вселенной. Но как насчет множественных вселенных и обезьян из разных измерений? Пора, пожалуй, применить критерий голографической теории урины.

Не важно, будет ли когда-нибудь заявление о Шекспире и обезьянах проверено на практике. Важно, что закон больших чисел все же работает. Вы можете подождать означенное время или поверить мне на слово.

7

Нет ли здесь жульничества или ошибок восприятия?

от факт, что вы читаете эту книгу, уже кое-что говорит о вас.

Может быть, вы студент, которому интересны критическое мышление и мир паранормального. Вы, наверное, удивитесь, но по результатам изучения других читателей этой книги и студентов был составлен детальный психологический портрет. Посмотрим, подходит ли он вам:

Вы очень нуждаетесь в том, чтобы другие люди любили и восхищались вами. Вы довольно самокритичны. У вас есть много скрытых возможностей, которые вы так и не использовали себе во благо. Хотя у вас есть некоторые личные слабости, вы в общем способны их нивелировать. Дисциплинированный и уверенный с виду, на самом деле вы склонны волноваться и чувствовать неуверенное :ь. Временами вас охватывают серьезные сомнения, приняли ли вы правильное решение или сделали ли правильный поступок. Вы предпочитаете некоторое разнообразие, рамки и ограничения вызывают у вас недовольство. Также вы гордитесь тем, что мыслите независимо; вы не принимаете чужих утверждений на веру без достаточных доказательств. Вы поняли, что быть слишком откровенным с другими людьми – не слишком мудро. Иногда вы экстравертны, приветливы и общительны, иногда же – интровертны, осторожны и сдержанны. Некоторые из ваших стремлений довольно нереалистичны.

Пора свериться с реальностью. Если вы нашли это описание неприятно близким к действительности, знайте, что вы не одиноки. В 1948 г. психолог Бертрам Форер дал своим студентам личностный тест, а через несколько дней раздал каждому личностные профили, будто бы составленные на основании результатов теста. Студенты должны были оценить точность профиля по 5-балльной шкале (0 = «очень плохо», 5 = «превосходно»). Средний балл оказался равен 4,26. Однако все это было своего рода розыгрышем. На самом деле Форер раздал студентам один и тот же достаточно расплывчатый личностный профиль, составленный на основе прочитанных гороскопов. Это тот самый «детальный психологический портрет», который вы прочли чуть выше. Приведенное описание не имеет никакого отношения к вашей личности, как не имело отношения и к личностям студентов. Опыт Форера был повторен сотни раз, причем средняя оценка профиля всегда оказывается выше 4,2 или 84% (Carroll, 2003). Попробуйте раздать это описание друзьям на вечеринке. Не исключено, что они придут в восхищение от ваших экстрасенсорных способностей.