В последние годы проблема воспроизводимости научных исследований становится все более актуальной для мирового научного сообщества. Особенно это касается биомедицинских исследований – области, где точность и надежность данных напрямую влияют на здоровье миллиарда людей и развитие медицинских технологий. Недавнее масштабное исследование, проведенное в Бразилии, вновь поставило под сомнение валидность множества научных работ, вызвав широкий резонанс и стимулируя дискуссии о необходимости системных изменений в организации научного процесса. Трудности воспроизводимости научных результатов давно известны, однако именно бразильский проект приобрел особое значение благодаря своему масштабу и подходу. Вместо того чтобы ограничиться одной конкретной областью или направлением, инициатива сосредоточилась на воспроизведении опытов, связанных с тремя основными методами, широко применяемыми в биомедицинских исследованиях: тестами метаболизма клеток, техникой амплификации генетического материала и поведенческими исследованиями на грызунах.
Программа была запущена в 2019 году и стала совместным проектом более чем 50 научных лабораторий из различных уголков Бразилии. В общей сложности в воспроизводстве участвовали свыше 200 ученых. Для воспроизведения использовалась выборка из публикаций, опубликованных с 1998 по 2017 годы. Главными критериями отбора были не научная популярность или престиж журнала, а конкретные методы исследования и возможность лабораторий провести аналогичные эксперименты. Результаты, опубликованные в апреле 2025 года на bioRxiv, усугубили ситуацию.
Менее половины (около 21%) воспроизведенных экспериментов подтвердили первоначальные результаты по большинству оценочных критериев. При этом отмечено, что эффекты, заявленные в оригинальных работах, в среднем были на 60% сильнее, чем в экспериментальных повторениях. Это говорит о том, что не только воспроизводимость вызывается сомнением, но и эффект часто существенно переоценивают. Главными проблемами, выявленными в ходе исследования, стали разногласия в точности повторения протоколов и логистические осложнения, особенно в условиях пандемии COVID-19, которая сильно затруднила коммуникацию и доступ к оборудованию. Проект сопоставил подходы и усилия множества независимых исследовательских групп, что напоминало попытки скоординировать «оркестр» из десятков «гаражных групп» с разным стилем и техникой игры.
Главные организаторы проекта, включая координатора Олаво Брохера Амарала и метаисследователя Мариану Бошат де Абреу, называют эти результаты тревожным сигналом. Они подчеркивают, что обнародование таких данных — это не обвинение отдельных ученых, а шаг к переосмыслению научного стандарта и улучшению качества исследований в стране. Важно не просто констатировать проблемы, но использовать результаты для разработки новых стратегий, повышения прозрачности исследований и внедрения реформ в рамках университетов и государственных научных структур. Этот проект выделяется среди прочих мер по проверке воспроизводимости своим акцентом не на отдельных исследованиях или полях науки, а на универсальных методах, широко применяемых в биомедицине. Такой подход позволяет выявлять системные проблемы в практике экспериментов, а не отдельные случаи.
В частности, удельное внимание было уделено качеству статистических выводов, полноте отчётности и возможность других лабораторий повторить работу с минимальными допущениями. Ситуация с переоценкой эффектов в публикациях также вызывает вопросы к редакционной политике научных журналов, которые зачастую предпочитают публиковать сенсационные и статистически значимые результаты, тем самым способствуя феномену «эффекта публикабельности». В последствии это приводит к научному искажению, когда отрицательные или нейтральные результаты остаются в тени, а преувеличенные эффекты становятся нормой литературных обзоров и научных цитирований. Пандемия COVID-19, прошедшая посреди проекта, оказала двойственное влияние. С одной стороны, она создала многочисленные препятствия для взаимодействия лабораторий: от ограничений на передвижение и трудностей с доставкой материалов до временного закрытия многих исследовательских центров.
С другой стороны, она продемонстрировала важность быстрой, надежной и воспроизводимой науки в условиях глобального кризиса. Опыт бразильского репликационного исследования может стать важным уроком не только для самой Бразилии, но и для мирового научного сообщества. Он позволяет определить направления изменений, которые необходимы для повышения надежности биомедицинских исследований: внедрение стандартов открытости и прозрачности, обязательное предоставление полных протоколов и методов, повышение квалификации исследователей в области статистики и методологии, а также создание инфраструктуры для независимой проверки результатов. Распространение культуры репликации научных работ способствует снижению риска научных ошибок, фальсификаций и необоснованных гипотез. В долгосрочной перспективе это способствует сохранению доверия между учеными и обществом, а также эффективности использования бюджетных средств, выделяемых на исследовательскую деятельность.