В последние годы проблема воспроизводимости результатов научных исследований стала одной из самых острых тем в научном сообществе. В Бразилии недавно завершился уникальный массовый проект, направленный на проверку надежности биомедицинских исследований, проведенных в стране. Однако результат оказалась тревожным: менее половины попыток воспроизвести исследования дали схожие результаты с оригинальными публикациями. Это открытие не только подтверждает существующую глобальную «кризис воспроизводимости», но и вызывает необходимость реформ и переосмысления научной политики в Бразилии. Проект, получивший название Бразильская инициатива воспроизводимости, стартовал в 2019 году и объединил усилия более пятидесяти исследовательских команд из разных лабораторий по всей стране.
Его замысел заключался в проверке не отдельных исследований в конкретных областях, а методологических подходов, которые широко применяются в биомедицинской науке. Такая фокусировка позволила оценить качество исследовательских результатов, независимо от исследовательской тематики. Организаторы выбрали три ключевых метода, активно используемых в биомедицинских экспериментах: анализ клеточного метаболизма, амплификация генетического материала и тесты на лабиринтах для грызунов, позволяющие оценить когнитивные функции животных. Для проверки были случайным образом отобраны работы, опубликованные с 1998 по 2017 годы, где как минимум половина авторов имели аффилиацию с бразильскими учреждениями. Для воспроизведения каждого исследования привлекалось по три независимых лаборатории, а результаты оценивались специальной комиссией, которая определяла, насколько воспроизводимы исходные эксперименты.
В итоге из 60 отобранных публикаций было проведено 97 воспроизводимых попыток по 47 разным экспериментам. К сожалению, только около 21% работ прошли более чем половину установленных критериев воспроизводимости. Одним из самых тревожных открытий стало то, что в исходных статьях эффект воздействия зачастую был завышен примерно на 60% относительно повторных исследований. Это говорит о существующем в биомедицинской литературе эффекте преувеличения результатов, что может приводить к некорректным выводам и затруднять дальнейшее развитие медицины и фармакологии. Стоит отметить, что подобные проблемы с воспроизводимостью не являются исключительной особенностью бразильской науки.
Подобные масштабные проверки в США, Европе и других регионах часто выявляли сравнимо низкие показатели воспроизводимости. Однако уникальность данного проекта в его широком национальном охвате и методологическом подходе, который позволяет выявлять более системные проблемы научной среды, такие как стандарты проведения экспериментов, качество отчетности и прозрачность публикаций. Несмотря на сложные условия работы, включая пандемию COVID-19, организаторы проекта смогли успешно координировать процесс и привлечь к работе свыше двухсот ученых и специалистов. В качестве главных вызовов они отмечают сложности в точном воспроизведении протоколов, а также неоднозначность интерпретации некоторых методических деталей, что усугубляет проблему верификации данных. Результаты исследования вызвали бурные обсуждения в научном сообществе и стимулировали призывы к структурным изменениям как на уровне университетов, так и государственной политики.
Ученые и эксперты считают необходимым внедрять более строгие стандарты отчетности, поощрять открытый доступ к экспериментальным данным, а также создавать механизмы раннего выявления возможных проблем с надежностью научных публикаций. Кроме того, инициатива подчеркнула важность образования и повышения квалификации исследователей в вопросах методологии, статистики и этики научных исследований. Такие меры способны повысить качество проведенных экспериментов и снизить риски ошибки или искажения данных. В перспективе Бразилия может стать примером для других стран, демонстрируя, как системная и коллективная работа по повышению воспроизводимости фундаментально улучшит научный ландшафт и укрепит доверие к научным выводам. Уже сейчас проект стимулирует диалог между исследовательскими институтами, грантовыми агентствами и правительственными органами, направленный на поддержку реформ и улучшение инфраструктуры научных исследований.
Помимо локальных изменений, результаты Бразильской инициативы воспроизводимости вносят вклад в глобальное движение за повышение прозрачности и надежности науки. Они напоминают о необходимости постоянного контроля и самоанализа научного сообщества, поскольку именно таким образом можно обеспечить прогресс и устойчивое развитие биомедицинских исследований. Невоспроизводимость данных представляет собой серьезный вызов современному научному миру, но его решение возможно через объединение усилий на всех уровнях – от отдельных ученых до международных организаций. Бразильский пример наглядно показывает, что даже в условиях ограничений и трудностей возможно организовать масштабные проекты, способные выявить и устранить ключевые проблемы в научной практике. Таким образом, результаты масштабного исследования в Бразилии служат важным предупреждением о состоянии нашедших широкое применение биомедицинских методов и подчеркивают необходимость реформирования научной инфраструктуры и культуры.
Только комплексный и скоординированный подход позволит повысить качество научных данных и обеспечить надежную основу для развития медицины и биологии в будущем.
