Воспроизводимость научных исследований давно считается краеугольным камнем надёжной науки. Способность повторить эксперимент и получить схожие результаты подтверждает истинность и устойчивость научных открытий. Однако последние годы в разных научных областях всё чаще вызывают тревогу данные о кризисе воспроизводимости, особенно в биомедицине. В апреле 2025 года в Бразилии завершился уникальный национальный проект, направленный на проверку результатов исследований в области биомедицины, который показал тревожные результаты и выявил масштабные трудности с подтверждением опубликованных данных. Этот масштабный проект открыл новые горизонты для понимания системных проблем научного процесса и стал серьёзным вызовом для научного сообщества в стране и за её пределами.
Инициатива под названием Brazilian Reproducibility Initiative была запущена в 2019 году группой учёных Федерального университета Рио-де-Жанейро. В отличие от предыдущих проектов, которые концентрировались на повторении отдельных высокорейтинговых или популярных исследований, эта инициатива ставила целью проверить воспроизводимость научных результатов на основе конкретных методов, широко используемых в биомедицинских экспериментах. Такой подход позволил сконцентрироваться не на тематике или популярности работы, а на фундаментальных инструментах и стандартных методиках, которые применяются в большом количестве лабораторий по всей стране. Для реализации проекта были отобраны три наиболее распространенных лабораторных метода: анализ клеточного метаболизма, техника амплификации генетического материала (например, ПЦР) и поведенческий тест на мышах с помощью лабиринтов. Эти методы представляют собой основу многих биомедицинских исследований, и их выбор обеспечил широкое охватывание различных областей биологии и медицины.
Далее был проведен рандомизированный отбор публикаций с участием бразильских учёных, которые использовали эти методики в своих экспериментах в период с 1998 по 2017 год. В проекте приняли участие 213 исследователей из 56 разных лабораторий по всей стране. Каждое выбранное исследование тестировалось как минимум в трех независимых лабораториях. Для оценки использовались пять критериев статистической и экспериментальной достоверности. Результаты оказались крайне разочаровывающими: только около 21% экспериментов удалось воспроизвести с удовлетворительным уровнем подтверждения исходных данных.
В дополнение к низкой воспроизводимости, было выявлено систематическое переоценивание эффектов в оригинальных публикациях, где размер эффекта в среднем превышал тот, что фиксировался в повторных экспериментах, на 60 процентов. Это указывает на вероятный эффект публикационного предвзятия и другие методологические или статистические недостатки, ухудшающие достоверность публикаций. Такой низкий индекс воспроизводимости подтверждает, что глобальная проблема, известная как "кризис воспроизводимости", затрагивает не только отдельные страны или области, а является системной для биомедицинских исследований. Особенность бразильского проекта — это не только национальный масштаб, но и попытка сфокусироваться на универсальных методах, чтобы понять, как стандартизация и совместная работа могут помочь бороться с проблемами непрозрачности и ошибочных результатов. Сам проект столкнулся с многочисленными трудностями: пандемия COVID-19 затруднила организацию экспериментов, лаборатории имели разный уровень оснащения и разную квалификацию, а координация работы десятков команд требовала много усилий и компромиссов.
Кураторы проекта говорили, что объединение множества лабораторий с разной «манерой игры» было похоже на попытку превратить «гаражные группы» в симфонический оркестр. Несмотря на все сложности, исследователи выражают уверенность, что проект даст толчок к реформам в научной сфере и повысит качество исследований в Бразилии. По мнению координирующих проект специалистов, результаты позволят создавать более строгие стандарты для публикаций, повышать требования к реплицируемости и стимулировать открытость данных и протоколов. Это, в свою очередь, может помочь притормозить тенденции к публикационному давлению, манипуляциям с результатами и "p-hacking" — подстройке данных под желаемый статистический уровень значимости. Глобально сложно переоценить значимость подобных усилий.
Воспроизводимость экспериментов — ключ к проверке валидности научных теорий и клинических подходов, особенно в области биомедицины, где ошибки могут иметь серьёзные последствия для пациентов и здравоохранения в целом. Недостоверные исследования приводят к траты ресурсов, замедляют прогресс в медицине и подрывают доверие к науке. Поэтому международное научное сообщество приветствует любые попытки повысить уровень воспроизводимости и строгости исследований, будь то в Бразилии, Европе или США. Проблема воспроизводимости также затрагивает вопросы открытой науки и доступности данных. Чем прозрачнее и доступнее детали экспериментов и первичные данные, тем легче другим учёным проверить и повторить исследования.
В последние годы наблюдается рост движения за открытый доступ к научным публикациям и data sharing, что способствует улучшению ситуации. Однако далеко не все исследовательские группы и издатели придерживаются таких принципов, а иногда коммерческие интересы и страх потерять конкурентные преимущества стоят на пути к максимальной открытости. По итогам бразильского проекта уже высказываются предложения о необходимости реформ в национальной научной политике. Некоторые эксперты предлагают включать обязательные проверки воспроизводимости и более строгие рецензии перед публикацией. Другие считают, что университетам и научным институтам следует усилить обучение методам надёжного научного дизайна, статистики и этике исследований.
Помимо профессионального сообщества, важна и поддержка государственных органов и спонсоров, поскольку стабильное финансирование исследований и создание инфраструктуры для повторных экспериментов требуют ресурсов. Это позволит сформировать культуру, где репликация и проверка данных будут так же ценны, как и оригинальные открытия, способствуя устойчивому развитию науки. В заключение, бразильский проект по воспроизводимости биомедицинских исследований стал знаковым событием, которое выявило масштабные проблемы с повторением научных результатов. Недовольство состоянием дел в науке — не повод для пессимизма, а стимул к переменам. Чем быстрее научное сообщество примет вызов и начнёт реформы, тем надёжнее и эффективнее станет будущее биомедицинских исследований.
Только совместными усилиями учёных, институтов, спонсоров и государственных структур можно преодолеть кризис воспроизводимости и вернуть доверие к науке, на которой базируется здоровье и жизнь миллионов людей.
