В последние годы в научном сообществе все чаще обсуждается так называемый кризис воспроизводимости, когда попытки повторить результаты опубликованных исследований оказываются неудачными. Особенно остро эта проблема стоит в области биомедицины, где от точности и достоверности данных напрямую зависят разработки новых лекарственных препаратов и методов лечения. Недавний масштабный проект, проведенный бразильскими учеными, вновь поднял эту тему, показав, что меньше половины исследовательских работ удалось воспроизвести в независимых лабораториях. Эта новость вызвала широкое обсуждение необходимости реформ и повышения стандартов в биомедицинских исследованиях как в Бразилии, так и во всем мире. Проект, возглавляемый Федеральным университетом Рио-де-Жанейро, носил уникальный характер.
Вместо того чтобы сосредоточиться на одной области науки или на самых цитируемых публикациях, ученые выбрали другой подход — они проверяли исследования по трём наиболее распространённым методам, используемым в биомедицинских лабораториях по всей стране. Такой подход позволил оценить не только репутацию публикаций, но и технологическую воспроизводимость конкретных экспериментов, что дает более объективное понимание сложностей в воспроизведении научных результатов. Участие в проекте приняли более двухсот ученых из пятидесяти шести лабораторий по всей Бразилии, что свидетельствует как о масштабности инициативы, так и о желании научного сообщества поднять стандарты качества исследований. Работа проходила в непростых условиях пандемии COVID-19, что добавляло организационных и технических сложностей, однако коллективные усилия позволили выполнить около сотни валидных повторных экспериментов на базе сорока семи различных исследований. Основные критерии, по которым оценивалась воспроизводимость, включали наличие статистически значимых результатов в той же направленности, что и в оригинальных работах, а также размер эффекта, выявленного в повторных тестах.
Здесь ситуация оказалась тревожной: только примерно пятая часть экспериментов соответствовала хотя бы половине критериев воспроизводимости. Кроме того, эффект в первоначальных исследованиях оказался в среднем на 60 процентов завышен в сравнении с результатами повторных испытаний. Это указывает на склонность к перегреванию данных в публикациях, что может искажать общее представление о значимости тех или иных биологических эффектов. Результаты этого бразильского проекта совпадают с ранее опубликованными данными из международных инициатив, выявляющих низкие показатели воспроизводимости в биомедицинской и других областях науки. Тем не менее, именно концентрирование усилий на специфических методах и национальном научном ландшафте делает это исследование важным примером для других стран, желающих проверить качество своей научной продукции и обеспечить доверие к результатам.
Команда проекта подчеркивает, что выявленные проблемы — не повод для пессимизма, а стимул для глубоких реформ. Во-первых, необходима стандартизация протоколов и повышение прозрачности публикаций. Ученые должны более подробно и доступно описывать методики и условия проведения экспериментов, что значительно облегчит попытки воспроизведения. Во-вторых, следует пересмотреть традиционные критерии отбора для публикаций и финансирования, уделяя больше внимания качеству и проверяемости результатов, нежели количеству публикаций и известности авторов. Дополнительный аспект — культура науки в целом.
Часто в погоне за престижем и финансированием исследовательские коллективы склонны минимизировать неудачи и преувеличивать значимость своих данных. В таких условиях важной становится поддержка открытой науки и практик предрегистрации исследований, когда протоколы исследований публикуются до начала работы, а данные становятся доступными для общественности. Бразильский проект запускает важный диалог не только внутри страны, но и в глобальном научном сообществе. Он подтверждает, что для обеспечения прогресса медицины и биологии необходимо пересмотреть стандарты исследовательской деятельности. Только так можно обеспечить, чтобы результаты научных работ действительно служили основой для развития технологий и улучшения здоровья людей, а не становились мишенью для критики и сомнений.
Таким образом, данное исследование служит важным призывом к действию для всех участников научного процесса — от отдельных ученых до правительственных организаций и издательств. Воспроизводимость — ключевой элемент доверия к науке, и ее укрепление должно стать приоритетом в условиях быстроразвивающихся технологий и новых вызовов в медицине. Только при совместных усилиях можно надеяться на формирование более надежной и эффективной биомедицинской науки, способной приносить реальные и проверенные результаты во благо общества.
