Авторы других исследований попытались сделать нечто подобное в меньших масштабах. Они не предлагали статей для публикации в журнал, а с его помощью высылали поддельные научные работы различным ученым для экспертной оценки. Эти люди не принимали окончательного решения по публикации, но давали советы редакторам, поэтому учитывать значимость их мнения было бы тоже полезно. Такие исследования принесли более смешанные результаты. В одном из них, проведенном в 1977 году, поддельные статьи с одинаковыми методами, но разными результатами были высланы 75 экспертам на рассмотрение. Было отмечено пристрастное отношение рецензентов к результатам, которые не совпадали с их собственным взглядом на рассматриваемый вопрос.39
В рамках другого исследования, проведенного в 1994 году, были изучены мнения экспертов об устройстве для чрескожной электростимуляции нервов — довольно-таки сомнительные приспособления для облегчения боли. Было найдено 33 эксперта, имевших твердое мнение относительно полезности либо бесполезности данных устройств. И снова было обнаружено, что отношение к научной работе сильно зависело от уже сформировавшихся убеждений авторов, несмотря на то что исследование было небольшим.40 В другой статье подобным образом поступили с работами по изучению гомеопатических средств. Исследование выяснило, что качество результатов не оказало никакого эффекта на решение экспертов из ведущих медицинских журналов принять их к публикации или нет.41
Одно из последних исследований методом случайной выборки было проведено в 2010 году в больших масштабах для проверки, действительно ли рецензенты отвергают идеи, исходя из своих убеждений (хороший показатель пристрастного отношения журналов к результатам, в то время как они должны просто следить за тем, правильно ли спланировано исследование и грамотно ли оно проведено). Поддельные работы были высланы более чем 200 экспертам. Все работы были похожи, за исключением результатов, о которых они сообщали. Половина из экспертов получила статьи с результатами, которые не должны были им понравиться, а половина — те, что должны были быть приняты ими благосклонно. Рецензенты чаще рекомендовали статью к публикации, если получали ту версию отчета, где были нравившиеся им результаты (80 % против 70 %), чаще выявляли ошибки в работе, результаты которой им не нравились, и оценивали методы более высоко, если им нравились результаты исследования.42
В целом же, даже если были заметны явные перекосы в некоторых случаях, полученные результаты не свидетельствовали о том, что журналы — основная причина проблемы исчезновения материалов исследований с неудовлетворительными результатами. В экспериментах, изолирующих экспертов, эти независимые рецензенты относились пристрастно к некоторым работам, но их слово не было последним при решении вопроса о публикации. И во всех исследованиях, изучавших путь работ с отрицательными результатами, факты говорят о том, что они проходили в печать без всяких проблем. Возможно, журналы иногда и склонны отказывать авторам в публикации. В статье «Проблемы медицинских журналов» Ричард Смит, в прошлом редактор «Британского медицинского журнала» (BMJ), приводит прекрасный обзор недостатков, которыми грешат разные издания43; и позднее мы увидим, что они закрывают глаза даже на важные и очевидные изъяны в методике исследования. Однако было бы несправедливо обвинять в ограничении доступа к информации только их одних.