В научном мире воспроизводимость результатов исследования является одной из главных характеристик надежности и достоверности данных. Однако реализовать эту концепцию на практике часто оказывается достаточно непросто. В апреле 2025 года ученые из Бразилии объявили итоги масштабного проекта по проверке воспроизводимости биомедицинских исследований, и результаты оказались разочаровывающими. Менее 50% воспроизведенных экспериментов дали те же результаты, что и оригинальные публикации, что вновь поднимает вопросы о качестве и достоверности научных данных в биомедицине. Проект получил название «Инициатива по воспроизводимости в Бразилии» и был запущен в 2019 году группой исследователей из Федерального университета Рио-де-Жанейро (UFRJ).
Целью команды стало выполнение крупномасштабного анализа воспроизводимости исследований в биомедицинской сфере, с уникальным подходом — они сосредоточились не на одной конкретной области науки, а на распространенных методах, используемых во многих публикациях. Такая выборка позволила оценить общую ситуацию в научных трудах, отражающих ключевые биомедицинские технологии. Была выбрана группа методов, включающая исследование клеточного метаболизма, технику амплификации генетического материала и тесты на лабиринтах с участием грызунов. Это позволило привлечь широкое число лабораторий с необходимым оборудованием и опытом и выполнить репликацию экспериментальных данных с максимальной точностью. В исследовании приняли участие свыше 200 ученых из 56 лабораторий Бразилии, что обеспечило масштаб и надежность эксперимента, несмотря на сложные условия, вызванные пандемией COVID-19, которая существенно ограничила возможности команд.
Координация проекта лежала на ученых из группы российских бразильских ученых — Олаво Бохрера Амарала и Марианы Боешат де Абреу. Репликационные попытки основывались на случайном выборе публикаций, датируемых 1998 по 2017 годы, где значительная часть авторов была связана с бразильскими учреждениями. Ключевым критерием была возможность воспроизведения экспериментов с высоким уровнем доверия. Каждое исследование проверялось как минимум в трех лабораториях с независимой оценкой результатов специальной комиссией. Удивительно, но только 21% проверенных экспериментов были признаны воспроизводимыми по основным критериям.
Это примерно совпадает с результатами аналогичных проектов в США и Европе и сигнализирует о масштабной проблеме качества научных данных в биомедицине. Ученые также отметили «раздувание» эффекта в оригинальных исследованиях: средний размер эффекта, заявленный авторами, был почти на 60% больше, чем во времени репликаций. Такое преувеличение подсиляет риски неправильно принятия решений в клинических и научных практиках. Эти результаты непосредственно указывают на необходимость реформирования научных практик и улучшения стандартов в Бразилии, особенно в аспектах публикации, проверки статистики и методологии. Результаты исследования оказывают давление на научное сообщество и государственные органы, заставляя задуматься о мерах по улучшению качества исследований и повышению прозрачности научного процесса.
Можно отметить, что инициатива не просто критикует отечественную науку, а предлагает вектор движения вперед. Использование современных процедур репликации позволит повысить доверие к результатам, увеличить прозрачность и активизировать реформы в вузах и научных институтах. Работа обнажила и другие важные моменты, таких как невнятность протоколов экспериментов, отсутствие стандартов воспроизведения и избыток «гаражных» подходов, что мешает согласованности исследований и создает трудности при попытках их повторить. Многие научные круги мира уже давно обсуждают проблему «кризиса воспроизводимости», когда значительная часть результатов не поддается подтверждению в независимых проверках. Результаты бразильской инициативы — это предупреждающий сигнал для международного сообщества.
Биомедицина, как одна из самых динамичных и социально значимых отраслей, нуждается в особо строгих стандартах доказательности. Кроме того, выявленные результаты могут оказать влияние на финансирование исследований, а также на политику научных журналов, которые активно обсуждают необходимость введения дополнительных проверок данных и внедрения открытой науки. Помимо воздействия на научные учреждения, данный проект влияет на восприятие общества относительно биомедицинских исследований. Публичное обсуждение воспроизводимости данных стимулирует осознание того, насколько важна научная честность и насколько уязвима современная наука перед ошибками и необъективностью. Также эксперты отмечают, что выявленные ошибки часто связаны с использованием статистических методов и их неправильной интерпретацией.