Предпочтения при публикации

Мы уже видели (глава 3), что исследователи предпочитают публиковать необычные и обязательно положительные результаты. Неудачи их не интересуют. Журналы делают то же самое и отбирают для публикации преимущественно положительные результаты. Если вы проведете тщательный эксперимент и установите, что, на тучи кричи не кричи, дождь пойдет вне зависимости от ваших усилий, то вы вряд ли станете посылать этот результат для публикации в научный журнал. А если пошлете, то журнал наверняка откажется публиковать вашу статью. То, что у положительных результатов больше шансов на публикацию в научном журнале, не секрет. Скорее всего, именно предпочтениями при публикации объясняются многие «научные демонстрации» паранормальных явлений. Рассмотрим это с точки зрения теории вероятностей. Так, мы можем предположить, что из 100 исследований некоего паранормального явления пять случайно дадут положительный результат. В данном случае 5 % — это вероятность случайной флуктуации в том случае, если на самом деле этого паранормального явления не существует вовсе. При этом из 100 исследований именно 5 положительных результатов со временем, скорее всего, будут опубликованы, создавая у читателей ложное впечатление о том, что существование этого паранормального явления доказано.

Чтобы исключить влияние предпочтений при публикации, исследователям и журналам следовало бы публиковать все без исключения результаты — и положительные, и отрицательные. Журналы, посвященные исследованию паранормальных явлений, начинают это делать; они требуют, чтобы исследователи еще до проведения регистрировали намеченные исследования, тогда отрицательные результаты не останутся незамеченными.

Еще один метод борьбы с предпочтениями при публикации — метаанализ множества различных исследований по данному вопросу, позволяющий определить, сколько негативных исследований потребовалось бы, чтобы свести на нет некий положительный результат. Метаанализ — очень популярный инструмент обработки данных парапсихологических исследований, поэтому мы подробнее рассмотрим его в главе 12.

Надо отметить, что одно из самых серьезных открытий, сделанных в процессе научных исследований паранормального, — это отрицательная корреляция между качеством проводимого исследования и полученными свидетельствами в пользу паранормального (Bauseil, 2007; Hines, 2003). Плохо спланированные дешевые исследовательские программы гораздо чаще дают положительные результаты, чем правильно организованные строгие исследования. В остальных областях научных исследований все обстоит с точностью до наоборот. Обычно чем лучше организовано исследование, тем более вероятен положительный результат.